세밀한 기하학 표현으로 3D 재구성 정확도 높인 FineSplat
원제 FineSplat: Fine Patches, Local Groups, Detailed Splats
추천 20댓글 2
Key Point
Feed-forward 3D 재구성의 정확도를 크게 높이는 방법론이 필요한 상황에서, 토큰 그룹화와 렌더링 피드백을 결합해 계산 효율과 복원 품질을 동시에 개선한 접근법을 제시한다.
핵심 요약
- Feed-forward 3D Gaussian Splatting 기반의 FineSplat을 제안하여 세밀한 기하학과 외관 정보를 더 정확히 복원한다.
- 고해상도 토큰에서 다중뷰 어텐션이 계산상 비효율적이므로, 뷰 기반 그룹화로 인접 뷰들 간 상호작용을 효율화하고 3D 공간 그룹화로 기하학적으로 연관된 토큰들을 재연결한다.
- 렌더링 오류를 직접 피드백으로 활용하여 세밀한 구조와 외관 복원을 위한 명시적 신호를 제공하고 단일 pass 방식의 한계를 극복한다.
- 컴팩트한 가우시안 생성 기법으로 세밀한 특징의 이점을 유지하면서도 원시 요소(primitive) 개수를 불필요하게 늘리지 않는다.
- 기존 방식과 동일하거나 더 적은 가우시안 예산으로 유사 방법들 대비 현저히 우수한 성능을 달성한다.