Hugging Face 논문AI · 머신러닝

대화하며 실시간 응답하는 AI 모델 Duo 공개

원제 Duo: A Reciprocal World Model for Full-Duplex Interaction

추천 43댓글 3Hengyuan Cao, Biao Gong, Guoshan Lu 외
Key Point

실시간 양방향 상호작용이 가능한 월드 모델은 기존의 단편적 명령 처리를 벗어나 대화 중단, 맥락 변경, 멀티모달 입력을 동시에 처리하는 새로운 AI 상호작용 패러다임을 보여준다.

핵심 요약

  • Hugging Face가 Reciprocal World Model(RWM) 기반의 Duo v1을 발표했으며, 이는 오디오·비디오를 지속적으로 인식하면서 실시간으로 사용자에게 응답하는 풀 듀플렉스 월드 모델이다.
  • 기존 월드 모델은 물리적 현실 시뮬레이션에만 집중해 추론과 의사결정을 외부 제어로 남겨두지만, RWM은 지능과 물리적 현실을 동등하게 기본으로 취급하며 Intent(상호작용의 인식)와 Realization(음성·영상 행동 생성)이 세계의 일부가 된다.
  • Duo v1의 핵심 기술은 (1) 자회귀 모델링으로 지속적 상호작용 추론과 참여 결정을 수행하고, (2) 청크별 조건과 동기화 토큰으로 Intent와 Realization을 타임라인에 정렬하며 인과 관계를 유지하고, (3) 이중 롤아웃 증류(dual rollout distillation)로 두 모듈의 분포 편향을 완화한다.
  • 모두 실시간 오디오·비디오·텍스트를 지속적으로 인식하므로 자발적 대화와 중단이 가능한 풀 듀플렉스 상호작용, 실물 공유, 가상 장면 편집, 음성·영상 게임 등이 마우스·키보드 없이 동작한다.
  • Duo v1은 초판이며 후속 버전이 예정되어 있다.
AI 요약 안내

AI가 한국어로 정리한 내용입니다. 정확한 정보는 원문을 확인해 주세요.

요약 원칙 ↗