손가락 감각 센서 통합하는 택타일 기초 모델 공개
원제 Learning Heterogeneous Tactile Representation for General Dexterous Manipulation
추천 102댓글 2
Key Point
여러 종류의 촉각 센서를 하나의 모델로 통합하면 로봇의 손가락 조작 능력이 비약적으로 향상되는데, 이는 산업용 로봇과 지능형 로봇 개발에 필수적인 기술이다.
핵심 요약
- 복합 조작 작업에 필수적인 접촉각 감각(tactile sensing)을 여러 센서 유형 간에 통합 표현하는 'LingBot-Touch' 모델을 개발했다.
- 압저항식(piezoresistive), 자기식(magnetic), 시각-촉각식(visuotactile) 센서 등 서로 다른 센서 데이터를 하나의 통일된 표현으로 변환하고 새로운 센서 유형으로 확장 가능하다.
- 생성된 택타일 토큰은 확산 정책(diffusion policy)부터 π₀.₅, LingBot-VLA 같은 비전-언어-행동(VLA) 모델까지 다양한 정책 모델에 플러그 앤 플레이 방식으로 통합되어 조작 능력을 향상시킨다.
- 시뮬레이션 환경과 여러 하드웨어 플랫폼의 실제 로봇에서 광범위하게 실험한 결과, 택타일 표현이 복잡한 조작 작업에 상당한 이점을 제공하면서도 계산 효율성을 유지한다.
- 센서별 물리학으로부터 택타일 이해를 자유롭게 하여 구체화된 모델(embodied models)이 이질적인 택타일 데이터를 효과적으로 활용할 수 있도록 설계되었다.
- 교차 센서 데이터를 활용한 택타일 학습의 확장 가능성을 입증하고 향후 하드웨어 및 구체화된 모델 설계에 시사점을 제공한다.