인간의 직관을 넘지 못하는 멀티모달 AI…'제6의 감각' 벤치마크 공개
Key Point
최고 수준의 멀티모달 AI도 인간의 직관적 시각 이해에 40%P 이상 뒤처지는 이유를 파악할 수 있는 새 평가 틀이 제시되었습니다.
핵심 요약
- 인간은 장면에서 명시적으로 드러난 것 이상을 인지한다. 과거 원인과 미래 궤적, 차량이 좁은 공간에 들어갈 수 있는지 여부, 영상에서 권위 관계, 보이지 않는 규칙 같은 추상적 패턴까지 순식간에 파악한다.
- 이런 빠른 직관적 추론 능력은 일상 네비게이션과 사회 상호작용의 핵심이며, 인간 곁에 배치되는 멀티모달 LLM에 필수적이다.
- 기존 시각 벤치마크들은 학술 수학 영역의 전문가 수준 분석 또는 저수준 지각만 다루며, 인간이 일상적으로 수행하는 직관적 추론은 검증되지 않는 문제가 있다.