Stable Video Diffusion

소개

Stable Video Diffusion은 Stability AI에서 개발한 이미지-비디오 모델입니다. Stable Diffusion 아키텍처를 기반으로 하지만 이미지가 아닌 비디오를 생성하도록 훈련되었습니다. 특히 576x1024 해상도에서 초당 3~30프레임으로 짧은 비디오를 생성할 수 있는 잠재 비디오 확산 모델입니다.

주요 기능

• 이미지-비디오 생성: 입력 이미지에서 짧은 비디오를 생성합니다.
• 텍스트-비디오 생성: 텍스트 프롬프트에서 비디오를 생성할 수 있습니다(일반적이지는 않음).
• 고해상도: 576x1024 해상도로 비디오를 생성합니다.
• 프레임 속도: 초당 3~30프레임의 프레임 속도를 지원합니다.
• Stable Diffusion 기반: 고품질 이미지 생성으로 유명한 Stable Diffusion의 아키텍처 강점을 상속합니다.

사용법

Stable Video Diffusion은 비상업적 라이선스로 인해 주로 연구 목적으로 사용됩니다. 연구원과 개발자는 이 모델을 사용하여 애니메이션, 시각 효과 또는 실험적인 영화 콘텐츠 제작과 같은 비디오 생성의 새로운 가능성을 탐색할 수 있습니다. 모델에 대한 액세스는 Stability AI의 신청 및 승인을 통해 부여됩니다.

예시

연구에 중점을 두어 직접적인 사용 예는 제한적일 수 있지만, 이 모델을 사용하여 원활하게 루프되는 비디오를 생성하거나, 기존 비디오 콘텐츠의 변형을 만들거나, 텍스트 또는 시각적 입력을 기반으로 현실적인 장면을 시뮬레이션할 수 있습니다.

참고

Stable Video Diffusion은 비상업적이며 연구 목적으로만 사용됩니다.