D3voz/openjutsu
비디오 속 인물 한 번에 바꾸기, 오픈소스로 나왔다
원제 D3voz/openjutsu
스타 1,934TypeScript
Key Point
로컬 GPU에서 돌아가는 오픈소스 비디오 인물 교체 도구로, 상용 Genjutsu 같은 수준의 기능을 무료로 제공하면서 정확한 추적과 다양한 편집 옵션으로 창작자의 선택지를 크게 넓혀줍니다.
핵심 요약
- 비디오와 인물 사진을 업로드하고 생성 버튼을 누르면 영상의 주인공을 새 인물로 자동 교체하거나 헤어·옷을 바꾸거나 제거할 수 있는 오픈소스 도구 'Openjutsu' 공개
- MiniMax H3 영상 생성, SAM 3.1 인물 추적, Qwen3-VL 8B 이미지 설명 모두 오픈 가중치 모델을 로컬 GPU에서 실행하며, 카메라 움직임·편집·사운드는 유지
- Next.js 프론트엔드와 ComfyUI 워크플로우 기반이며, FLUX.3 Klein으로 조명 재설정 가능
- 단순 모드(주인공만 교체), 고급 모드(최대 4명씩 개별 지정), 객체 교체, 사진 기반 재생성, 안면 보정, 색감 보정 등 6가지 모드 제공
- SolarRenderer를 통해 사진 기반 생성 시 최대 15초 영상 지원, FLUX가 원본 배경은 유지하면서 포즈와 인물만 준비
- 고급 모드의 몽타주 탭으로 같은 장면에서 여러 인물이 번갈아 나타나는 구간 처리 가능
- RTX 4060 Ti 16GB에서 480p 6초 영상에 약 6~13분 소요, 736p 기본이고 1080p는 약 2.5배 더 느림
- Windows에서 배치 파일로 한 번에 실행 가능하며, ComfyUI와 Node.js 22.6 이상 필요, 총 12개 커스텀 노드와 여러 모델 파일 설치 필요
- SAM 객체 추적 인식이 미진해 거울·반사는 미지원, 마스크 마진 조절로 정확도 개선 가능
- 객체 추가로 특정 물품을 영상에 넣을 수 있으며, 배경만 교체할 수도 있고, 객체 제거 모드도 지원
저장소 보기 ↗github.com