AI 생성 영상 진위 판별, 인공물 검증으로 설명 가능하게
원제 Verus-Insight: Towards Explainable Artifact Detection in AI-Generated Videos
추천 18댓글 2
Key Point
합성 영상이 실제와 구분 어려워지는 시점에 AI가 생성 결함을 어떻게 찾아내는지 설명 가능하게 만드는 것이 핵심으로, 콘텐츠 진위 검증의 신뢰성 기준을 세우기 때문이다.
핵심 요약
- 영상 생성 기술이 고도화되면서 합성 영상을 신뢰할 수 있게 탐지할 필요성이 커지고 있다.
- 기존 인공물 기반 탐지기는 생성 증거를 찾지만 미묘한 결함을 놓치거나 올바른 판단을 내리면서도 근거를 제시하지 못하는 한계가 있다.
- 이 연구는 인공물 탐지를 세 가지 단계로 구조화했다: 검사 대상을 정하는 '검사 계획', 실제 생성 결함이 있는지 확인하는 '증거 검증', 최종 판단으로 통합하는 '증거 통합'이다.
- Verus-Insight 모델은 인간 주석이 달린 전체 프로세스 감독과 단계적 능력 훈련으로 미세한 인공물 탐지와 영상 수준 탐지를 모두 강화했다.
- Verus-Bench 벤치마크는 인지 가능한 인공물에 대한 미세한 인간 주석을 포함해 인공물 탐지를 평가한다.
- 다양한 벤치마크 실험에서 Verus-Insight는 미세한 인공물 분석과 AI 생성 영상 탐지 모두에서 강한 성능을 보였으며, 인간이 인식한 인공물 복구에서 상당한 개선을 이뤘다.
- 세 가지 단계 능력은 상호보완적이면서도 구별되며, Verus-Insight는 거짓 인공물 주장을 늘리지 않으면서도 검사 대상을 검증된 증거로 더 안정적으로 변환한다.