드라마·영상물 자막을 에피소드 전체로 일관되게 번역하는 AI 시스템
원제 Breaking Babel: A Self-Evolving Multi-Agent System for Long-Form Subtitle Translation
추천 31댓글 2
Key Point
장편 드라마나 영상물의 일관된 자막 번역이 필요한 스튜디오·OTT 플랫폼과 다국어 번역을 다루는 개발자들이 접할 수 있는 실용적 멀티에이전트 AI 시스템의 등장이자, 기존 문장 단위 번역의 한계를 시리즈 전체 맥락으로 극복하는 새로운 접근법이다.
핵심 요약
- 장편 자막 번역은 전체 시리즈에 걸친 담화와 문화적 맥락을 고려해야 하지만, 기존 LLM은 문장 수준에만 머물고 다중 에이전트 시스템은 정적 워크플로우를 사용해 장면 복잡도에 적응하지 못한다.
- SMART라는 자체 진화 다중 에이전트 시스템을 제안하며, 테스트 시점 학습 단계에서 시리즈 수준 메모리를 구축하고 동적 라우터와 Mixture-of-Agents 계층을 통해 용어 검증·자막 제약 검증·문맥 검색 도구를 활용한다.
- 판사-개선 루프를 거쳐 후보들을 채점하고 텍스트 비판을 통해 LLM을 재학습하지 않으면서 에이전트 프롬프트와 라우팅 정책을 업데이트한다.
- 테스트 시점 추론 단계에서는 진화된 구성으로 남은 시리즈를 번역한다.
- 14개 장르, 에피소드 2~198편, 제작연도 1959~2023, 15개 목표 언어권의 Subtitle Arena 데이터셋을 공개했으며, 7개 차원과 19개 오류 분류를 포함한 자막 전용 MQM 평가 틀인 SubMQM을 도입했다.
- SMART는 15개 Subtitle Arena 방향 모두에서 최고의 MQM 점수를 달성해 최강 경합 에이전트 시스템 대비 평균 페널티를 6.9% 감소시켰다.
- 공개 MuSC 벤치마크에서 4개 언어쌍 모두에서 최고 모델 성능을 기록했고, 인간 평가에서도 5점 중 4.50점으로 최고 점수를 얻었다.