LuckyRobots는 로봇학과 관련된 흥미로운 AI 도구이다.
- ROS와 물리적 하드웨어로부터 분리되어 자연어로 로봇에 작업 요청 가능하다.
- 시뮬레이션 플랫폼으로 끝단에서 끝단까지의 AI 모델을 배포할 수 있으며, 현재는 카메라 입력, 로봇 운동학, 텍스트 명령 등을 받아들이고 액션 토큰을 생성하는 AI 모델을 배포한다.
- 다양한 가상 환경을 탐험할 수 있고, 로봇의 내비게이션을 가르칠 수 있으며, 실제와 같은 조건에서 로봇 모델을 테스트할 수 있는 실제적인 물리학 기능이 있다.
- 로봇으로부터 5 FPS의 카메라 피드를 제공하며, 여러 종류의 피드를 받을 수 있다. 또한 실제 로봇과 상상의 로봇을 시뮬레이션할 수 있다.
- 자연어 명령이 핵심으로, AI 모델을 실제 세계의 시뮬레이션에서 훈련시키고 자연어에 응답하도록 훈련시킬 수 있다.
- 계속 발전하며 많은 기능을 추가할 예정이다. 실제 로봇을 대여해 실제 세계 환경에서 테스트할 수 있게 될 것이고, UDRF 파일을 import할 수 있으며, 드론을 이용한 응용 프로그램도 가능해질 것이다. 또한 자신의 방을 스캔해 로봇을 훈련시킬 수도 있다. 이를 위해 많은 인재가 필요하며, 관심이 있는 사람은 연락을 하면 된다.
