발표 내용 요약합니다. 바쁘신 분들 위해 캡쳐도 해드립니다. ;-)
Introducing Stable Video 3D: Quality Novel View Synthesis and 3D Generation from Single Images
요약
- SV3D(Stable Video 3D)는 단일 입력 이미지에서 물체의 새로운 멀티뷰를 생성할 수 있습니다.
- SV3D는 Stability AI의 이전 모델인 Stable Zero123의 품질과 멀티뷰 생성 기능을 개선했습니다.
- SV3D에는 두 가지 변형이 있습니다. SV3D_u는 카메라 컨디셔닝 없이 궤도 영상을 생성하는 반면, SV3D_p는 단일 이미지와 궤도 뷰를 지원합니다.
- SV3D는 Stability AI 멤버십을 통해 상업적으로 사용하거나 비상업적 용도로 다운로드할 수 있습니다.
- SV3D는 이미지 확산 모델보다 보기 일관성이 뛰어난 비디오 확산 모델을 사용합니다.
- SV3D는 향상된 3D 최적화와 엉킨 조명을 풀고 최적화하는 기능을 도입했습니다.
- SV3D는 새로운 마스크드 스코어 증류 샘플링 손실 함수를 구현합니다.
- SV3D는 단일 이미지에서 3D 메시를 안정적으로 출력할 수 있습니다.
- SV3D는 특히 새로운 뷰 합성에서 3D 생성을 크게 발전시켰습니다.
- SV3D는 여러 뷰에서 일관된 오브젝트 모양을 보장하여 사실적이고 정확한 3D 생성을 개선합니다.