위조 탐지 AI, 딥페이크부터 변조 문서까지 한 번에
원제 Venus-DefakerOne2: A Vision-Forensics Foundation Model with Broader Coverage
추천 18댓글 1
Key Point
이진 분류 기반 위조 탐지 작업에서 다양한 매체와 위조 형태를 동시에 처리할 수 있는 통합 기반 모델의 등장으로, 위변조 탐지 기술의 범용성이 크게 높아졌다.
핵심 요약
- 비디오·이미지·물리적 스푸핑 등 다양한 형태의 위조에 대응하는 통합 기반 모델 'Venus-DefakerOne2'를 공개했다.
- 수천만 개의 오픈소스 및 사내 샘플로 학습했으며, LoRA와 전체 파라미터 튜닝을 번갈아 수행하는 'Tide-Style-Tuning' 기법으로 효율성과 일반화를 동시에 달성했다.
- 예측 엔트로피를 분석해 최적의 예측 방식을 자동으로 선택하는 'Entropy-based Test Adaptation'을 적용했다.
- 딥페이크 얼굴 96.7%, AI 생성 이미지 93.3%, 변조된 문서 87.6%, 조작된 자연 이미지 89.6%, 물리적 스푸핑 93.1%, AI 생성 영상 96.0%의 정확도를 달성했다.
- 선행 모델인 DefakerOne과 다양한 전문가 모델들을 크게 능가하는 성능을 보였다.