무엇을 찾으세요?

AI · 머신러닝 · hpcaitech/Open-Sora · Python

Open-Sora 2.0, 11B 모델로 고급 영상 생성 완전 공개

핵심 요약

• Open-Sora는 효율적인 고품질 영상 생성을 모두에게 개방하는 프로젝트이며, 3월 12일 2.0 버전(11B)을 공개했다.
• 2.0의 11B 모델은 HunyuanVideo의 11B 모델, Step-Video의 30B 모델과 동등한 수준의 성능을 VBench와 사용자 선호도 평가에서 보여준다.
• 학습 코드와 체크포인트까지 완전 공개하며, 2억 달러 이상의 높은 학습 비용을 200만 달러 수준으로 절감했다.
• 2월에 공개한 1.3 버전(1B)은 개선된 VAE와 Transformer 아키텍처로 생성 영상 품질을 대폭 향상시켰다.
• 2~15초, 144p~720p, 모든 가로세로 비율의 텍스트 기반 영상 생성과 이미지 기반 변환, 무한 시간 확장을 지원한다.