로봇이 과거 사건 기억해 물체 집기 — 가려진 대상도 스스로 찾는다
Key Point
로봇이 '그때 그 도구' 같이 문맥과 사건 기억에 기반한 지시를 이해하고 실행하는 것은 실제 가사 보조 로봇으로서의 실용성을 크게 높이는 진전이다.
핵심 요약
- 과거 상호작용 기록을 바탕으로 물체를 파악하고 집는 로봇 시스템 BeyondSCe를 발표했다. 사용자의 요청이 '저 사건에서 사용한 물건'처럼 사건 기반이므로, 물체 이름이나 외형만으로는 특정할 수 없는 상황을 다룬다.
- 시스템은 사건 히스토리와 현재 장면 정보를 함께 활용해 요청 물체를 찾고, 가려진 경우 과거 사건의 정보와 현재 기하학적 정보를 결합해 카메라 각도를 자동으로 선택한다.
- 사전학습 모델만 사용하며 추가 학습 없이 동작한다.