로봇 모델 평가, 비용 없이 미리 걸러낸다

핵심 요약

• 로봇 파운데이션 모델은 보통 비싼 실제 테스트(closed-loop rollout)로 평가되는데, 연구팀이 저비용 오프라인 방식을 제안했다.
• 플라토닉 표현 가설(PRH)은 모델 능력이 높아질수록 비전·언어처럼 모달리티들이 현실의 같은 통계 모델로 수렴한다고 본다.
• 연구진은 움직임 궤적도 이런 모달리티인지 묻고, 감각 표현이 물리 운동의 구조와 얼마나 잘 맞는지 측정하는 S²(Sensorimotor Alignment) 지표를 만들었다.
• S²는 학습 없이 즉시 계산되며 로봇 모델의 표현을 분석해 성능을 예측하는 오프라인 메트릭이다.
• 실험 결과 S²는 여러 모델군에서 로봇 작업 성공률과 양의 상관관계를 보였다.
• S²로 비전-언어 모델(VLM)을 비전-언어-행동 모델(VLA)로 미세조정하기 전에 유망한 백본을 미리 골라낼 수 있다.
• S²는 VLA와 세상 행동 모델(WAM)에서 관찰되는 현상에 대해 표현 수준의 설명을 제공한다.
• 이 연구는 플라토닉 표현 가설을 로봇 분야로 확장하고 감각-운동 정렬을 측정 가능하게 만들어, 실제 테스트만으로는 알 수 없는 로봇 모델의 특성을 드러낸다.