메타의 Habitat 3.0 - 사람, 로봇, AI 의 상호 작용 시뮬레이션 환경
요약
- FAIR은 웹 기반 챗봇이나 스마트 스피커와 같은 AI 도움 기능을 가진 것보다 훨씬 더 종합적으로 지능을 갖춘 신체 기반 AI 에이전트를 개발하고 있다.
- FAIR은 옷감을 입은 증강 현실 안경을 비롯한 AI 기반 인터페이스와 어시스턴트를 개발하고 있으며, 이를 통해 사용자가 하루 종일 동안 도움을 받을 수 있다고 주장하고 있다.
- FAIR은 사회적으로 지능적인 로봇 기술을 개선하고 있으며, 로봇이 일상적인 일을 도우며 사용자의 선호도에 맞게 개인화된 서비스를 제공할 수 있다고 주장하고 있다.
- FAIR은 로봇과 AR 안경과 같은 실제 하드웨어에서 신체 기반 AI 에이전트의 훈련과 테스트를 진행하는데, 이 과정은 확장성 제한과 표준화된 벤치마킹 절차의 복잡성과 안전상의 문제로 어려움을 겪는다고 말하고 있다.
- FAIR은 로봇 과학 연구를 위한 시뮬레이션 플랫폼, 데이터셋, 하드웨어와 소프트웨어를 포괄하는 저렴한 기술 스택을 개발하였다고 주장하고 있다.
- FAIR은 사회적으로 지능적인 로봇이 사람과 협력하여 일상적인 일을 수행하고 사람의 효율성을 향상시킨다는 목표를 가지고 Habitat 3.0 시뮬레이터를 발표하였다.
- FAIR은 사회적으로 지능적인 로봇 훈련을 위해 Habitat Synthetic Scenes Dataset (HSSD-200)를 개발하였다고 주장하고 있다.
- FAIR은 로봇을 가정용 도우미로 사용할 수 있는 저렴한 하드웨어와 소프트웨어 플랫폼인 HomeRobot을 발표하였다고 주장하고 있다.
해비탯 3.0
메타에서 발표한 시뮬레이션 환경으로 사람, 에이전트, 로봇이 집과 같은 환경에서 상호작용할 수 있는 도구이다.
이미지 : 이런 가상의 환경에서 AI 등의 여러 오브젝트와 상호 작용할 수 있다.
이와 함께 다양한 3D 객체와 장면을 포함하는 대규모 데이터셋도 공개했다. Habitat Synthetic Scenes Dataset (HSSD-200) 제공
이를 바탕으로 실제와 가상환경에서 다양한 작업을 수행할 수 있는 저렴한 홈 로봇 소프트웨어 및 하드웨어인 HomeRobot 플랫폼도 소개했다.
홈로봇의 모습
시뮬레이션이 중요한 이유는 강화학습 시 실제 환경이 아닌 가상의 환경에서 빠르고 안전하게 데이터를 수집할 수 있기 때문이라고 한다.
사회적으로 지능적인 로봇(socially intelligent robots)을 향한 연구 확장을 목표로 한다고 한다. 인간과 로봇이 상호 작용하며 적응할 수 있는 모델이라고 한다.
Embodied AI: Toward effective collaboration between humans and socially intelligent robots
habitat은 원래 서식지라는 뜻이다. VR 로도 활용을 할 수 있다고 한다. Habitat 1.0은 2019년 시작되었다고 한다. 메타버스에도 사용될 수 있을 것 같은 기술이다. 비슷한 서비스로는 NVIDIA의 옴니버스 시뮬레이션이나 Issac Sim 과 같은 기술이 있다.
공유하기
![카카오로 공유하기](/images/kakao-share.png)
![페이스북 공유하기](/images/facebook-share.png)
![url 복사하기](/images/link-share.png)
조회수 : 297