자연어로 영화같은 카메라 움직임을 3D 환경에서 자동 생성

핵심 요약

• FilmFlow는 자연어 지시나 참고 영상을 3D 가상 환경의 실행 가능한 카메라 궤적으로 변환하는 에이전트 시스템이다.
• Director 에이전트가 병렬 원자 동작들을 조합해 이동·회전·프레이밍을 동시에 제어하는 고수준 카메라 계획을 생성한다.
• Interpreter는 장면 기반 영화적 의도를 추출하고, Scout는 초기 시점을 선택하며, Critic은 렌더링 결과를 평가하고 시각적 피드백으로 반복 개선한다.
• CinemaBench 벤치마크에는 블렌더 자체 제작 및 라이선스 장면 150개가 포함되며, 장면당 5개 카메라 지시로 총 750개 텍스트 기반 작업과 60개 참고 영상을 제공한다.
• 벤치마크는 텍스트 기반 카메라 생성과 영상 참조 기반 카메라 생성 두 가지를 평가할 수 있다.
• FilmFlow는 다양한 베이스라인 대비 가장 높은 벤치마크 성능과 사용자 선호도를 달성했으며, 공간 추론·시간 조율·시각 구성에서 실행 가능한 3D 영화 제작을 효과적으로 수행한다.