Stable Video Diffusion 사용법

스테이블 비디오 디퓨전 사용법 (SVD)

stablevideo.com 에서 사용할 수 있다. Stable Video | Generate Videos with AI

로컬이나 ComfyUI와 같이 설치해서도 사용이 가능하다.

이미지로 생성하기

오픈 베타에는 모든 비디오가 공개된다.

나는 물병 사진을 넣고 Orbit을 입력해 봤다.

영상 : Stable Video | Generate Videos with AI

이런식으로 카메라가 물체를 중심으로 돌아가는 4초짜리 영상이 생성되었다.

기본적으로 이미지에 카메라 무빙이 생성되는 모델인 것 같다.

각 기능에 대한 설명은 다음과 같다.

• 고정 카메라 (Camera Locked): 카메라를 고정시켜 피사체의 움직임을 돋보이게 합니다.

• 카메라 흔들림 (Camera Shake): 동영상에 생동감과 활력을 더하기 위해 카메라에 랜덤한 움직임을 추가합니다.

• 틸트 상하 (Tilt Up / Down): 다른 시각을 위해 카메라를 위아래로 기울입니다.

• 오비트 (Orbit): 초점 주위를 카메라가 회전합니다. 두드러지는 전경이나 보케 효과 연출에 좋습니다.

• 패닝 좌우 (Pan Left / Right): sweeping view 를 위해 카메라를 가로 방향으로 이동합니다.

• 줌 인/아웃 (Zoom In / Out): 클로즈업 또는 와이드 샷을 위해 카메라 거리를 조정합니다.

• Dolly 인/아웃 (Dolly In / Out): 카메라를 앞뒤로 이동합니다.

• 위/아래 이동 (Move Up / Down): 카메라를 상하로 이동하여 높이 조정된 시점을 얻습니다.

텍스트로 생성하기

텍스트로 이미지를 생성하고 이걸 움직이는 영상으로 바꾸는 방식이다.

텍스트를 입력하면 4개의 이미지가 나오고 이걸 선택해서 역시 카메라 모션을 추가하면 된다.