AI 비디오 프롬프트의 기본 구조 이해하기

이미지 프롬프트와 영상 프롬프트는 무엇이 다른가

이미지 프롬프트는 한 장의 결과물을 만든다. 그래서 핵심은 "무엇이 보이는가"에 있다. 인물, 배경, 조명, 화풍, 구도처럼 한순간의 화면을 설명하면 된다.

반면 영상 프롬프트는 시간의 흐름이 들어간다. 한 장면이 가만히 멈춰 있는 것이 아니라, 여러 순간이 이어지면서 움직임과 변화가 만들어진다. 따라서 "무엇이 보이는가"뿐 아니라 "무엇이 어떻게 변하는가"를 함께 써야 한다. 인물이 가만히 서 있는지, 걸어오는지, 카메라가 다가가는지, 배경이 바뀌는지, 빛이 흔들리는지에 따라 완전히 다른 영상이 나온다.

예를 들어 다음 두 문장을 비교해 보자.

• 이미지 프롬프트: 비 오는 도시 골목에 서 있는 여성, 시네마틱 조명

• 영상 프롬프트: 비 오는 밤의 도시 골목에서 한 여성이 천천히 카메라 쪽으로 걸어온다. 카메라는 낮은 위치에서 뒤로 물러나며 따라가고, 네온사인이 젖은 바닥에 반사된다.

두 문장 모두 같은 장면을 말하지만, 영상 프롬프트에는 행동, 카메라 움직임, 시간에 따른 변화가 들어 있다. 이 차이를 이해해야 프롬프트를 단순한 장면 설명이 아니라 영상 설계도로 만들 수 있다.

AI 생성 이미지

영상 프롬프트를 이루는 핵심 요소

AI 비디오 프롬프트는 보통 다음 요소로 나눌 수 있다.

1. 주체: 누가 또는 무엇이 등장하는가

2. 행동: 주체가 무엇을 하는가

3. 배경: 어디에서 일어나는가

4. 시간과 지속: 언제, 몇 초 동안, 어떤 흐름으로 진행되는가

5. 카메라: 어떤 거리와 각도에서, 어떻게 움직이며 촬영하는가

6. 조명과 색감: 빛의 방향, 강도, 색 분위기는 어떤가

7. 스타일과 출력 조건: 실사인지 애니메이션인지, 화면비와 화질은 어떤가

각 요소는 결과물의 다른 부분을 바꾼다. 주체와 행동은 영상의 중심 내용을 정하고, 배경은 세계관을 만든다. 카메라와 조명은 영상의 완성도를 좌우한다. 스타일과 출력 조건은 최종 결과의 형태를 정리한다.

중요한 점은 이 요소들을 한꺼번에 길게 늘어놓는 것이 아니라, 장면에 필요한 정보만 선별해 쓰는 것이다. 모든 프롬프트에 모든 요소를 길게 넣을 필요는 없다. 하지만 원하는 결과가 분명할수록 핵심 요소는 빠지지 않아야 한다.

추상적인 표현을 시각 요소로 바꾸기

초보자가 자주 쓰는 문장이 있다.

멋진 영상으로 만들어줘.

문제는 AI가 "멋진"을 정확히 알 수 없다는 점이다. 멋진 영상은 사람마다 다르다. 누군가에게는 어두운 영화 같은 장면이고, 누군가에게는 밝고 선명한 광고 영상이다.

따라서 추상어는 눈에 보이는 요소로 바꿔야 한다.

• 멋진 영상 → 느린 카메라 이동, 부드러운 역광, 얕은 심도, 영화 같은 색 보정

• 감성적인 분위기 → 해질녘의 따뜻한 주황빛, 창가로 들어오는 부드러운 빛, 느린 움직임

• 고급스러운 제품 영상 → 검은 배경, 강한 측면 조명, 제품 표면의 반사광, 천천히 회전하는 카메라

• 긴장감 있는 장면 → 어두운 조명, 흔들리는 핸드헬드 카메라, 빠른 호흡의 움직임, 좁은 골목

AI 비디오 프롬프트에서는 감정을 직접 말하는 것보다, 그 감정을 만들 수 있는 시각 요소를 쓰는 편이 더 안정적이다.

정지 이미지에는 없지만 영상에는 꼭 필요한 정보

영상 프롬프트에서 특히 중요한 것은 움직임, 전환, 지속 시간, 장면 변화다. 이 네 가지를 의식하면 프롬프트가 훨씬 영상답게 바뀐다.

움직임

움직임은 크게 두 가지로 나눌 수 있다.

첫째, 피사체의 움직임이다. 인물이 걷거나, 손을 흔들거나, 제품이 회전하거나, 꽃잎이 흩날리는 움직임이다.

둘째, 카메라의 움직임이다. 카메라가 앞으로 다가가거나, 뒤로 물러나거나, 좌우로 이동하거나, 위에서 아래로 내려오는 움직임이다.

프롬프트에서 둘을 구분해 쓰면 결과가 더 명확해진다.

• 피사체 움직임: a young woman slowly turns her head toward the camera

• 카메라 움직임: the camera slowly pushes in from a medium shot to a close-up

전환

전환은 한 장면에서 다른 장면으로 넘어가는 방식이다. 짧은 생성 영상에서는 복잡한 전환보다 단순한 변화가 잘 작동한다.

• fade in from black: 검은 화면에서 서서히 나타남

• smooth transition to a close-up: 클로즈업으로 자연스럽게 전환

• the scene gradually changes from morning to sunset: 아침에서 해질녘으로 점진적 변화

지속 시간

지속 시간은 영상의 호흡을 정한다. 3초 영상과 10초 영상은 프롬프트 구조가 달라야 한다. 짧은 영상은 하나의 행동에 집중하는 것이 좋다.

• 3초: 제품이 천천히 회전한다

• 5초: 인물이 문을 열고 안으로 들어간다

• 8초 이상: 거리의 전경에서 시작해 인물을 따라가며 카페 입구까지 이동한다

장면 변화

장면 변화가 많을수록 프롬프트는 어려워진다. 초보자는 한 프롬프트에 여러 장면을 넣기보다, 하나의 장면 안에서 변화가 일어나도록 쓰는 것이 좋다.

나쁜 예:

여자가 집에서 일어나고, 지하철을 타고, 회사에 도착하고, 회의하고, 퇴근하는 영상

좋은 예:

아침 햇살이 들어오는 방에서 한 여성이 책상 위 노트북을 열고 커피를 한 모금 마신다. 카메라는 창가에서 책상 쪽으로 천천히 이동한다.

후자는 장면이 하나라서 AI가 훨씬 안정적으로 처리할 수 있다. 여러 사건을 한 번에 압축하기보다, 한순간을 선명하게 잡고 그 안에서 작은 변화를 만드는 방식이다.

기본 템플릿

영상 프롬프트는 다음 순서로 쓰면 쉽다.

[주체]가 [배경]에서 [행동]한다.
영상은 [지속 시간] 동안 이어지며, [장면의 변화]가 일어난다.
카메라는 [쇼트 크기]에서 시작해 [카메라 움직임]을 한다.
조명은 [빛의 상태]이고, 색감은 [색 분위기]다.
전체 스타일은 [시각 스타일]이며, [출력 조건]으로 생성한다.

영어 프롬프트로 바꾸면 다음과 같다.

[Subject] [action] in [background].
The video lasts for [duration], with [scene change or motion].
The camera starts on a [shot size] and [camera movement].
The lighting is [lighting condition], with [color mood].
The overall style is [visual style], rendered in [output conditions].

이 템플릿은 모든 장르에 사용할 수 있다. 제품 광고, 여행 영상, 인물 영상, 애니메이션 장면 모두 같은 구조에서 출발한다. 필요한 부분만 바꾸면 된다.

한 줄 프롬프트를 완성형 프롬프트로 확장하기

처음에는 대부분 이렇게 시작한다.

고양이가 카페에서 걷는 영상

이 문장은 나쁘지 않지만 정보가 부족하다. 어떤 고양이인지, 어떤 카페인지, 어떻게 걷는지, 카메라가 어디에 있는지 알 수 없다. 이제 단계별로 확장해 보자.

1단계: 주체와 배경을 구체화하기

작은 회색 고양이가 아늑한 빈티지 카페 안을 걷는다.

주체와 배경이 조금 더 선명해졌다. 하지만 아직 영상의 움직임은 단순하다.

2단계: 행동과 시간 흐름 추가하기

작은 회색 고양이가 아늑한 빈티지 카페 안에서 창가 테이블 사이를 천천히 걸어간다. 영상은 5초 동안 이어지며, 고양이는 마지막에 카메라를 잠깐 바라본다.

이제 시작과 끝이 생겼다. 영상은 단순한 장면이 아니라 짧은 흐름을 가진다.

3단계: 카메라와 조명 추가하기

카메라는 낮은 높이에서 고양이의 눈높이를 따라 천천히 이동한다. 창문으로 따뜻한 오후 햇살이 들어오고, 나무 테이블과 커피잔에 부드러운 그림자가 생긴다.

카메라와 조명이 들어가면 영상의 질감이 살아난다.

4단계: 스타일과 출력 조건 정리하기

실사풍 시네마틱 스타일, 얕은 심도, 부드러운 색감, 16:9 화면비, 고해상도 영상.

마지막으로 결과물의 형태를 정한다.

완성 프롬프트 예시

한국어 버전

작은 회색 고양이가 아늑한 빈티지 카페 안에서 창가 테이블 사이를 천천히 걸어간다. 영상은 5초 동안 이어지며, 고양이는 마지막에 카메라를 잠깐 바라본다. 카메라는 낮은 높이에서 고양이의 눈높이를 따라 부드럽게 이동한다. 창문으로 따뜻한 오후 햇살이 들어오고, 나무 테이블과 커피잔에 은은한 그림자가 생긴다. 실사풍 시네마틱 스타일, 얕은 심도, 자연스러운 색감, 16:9 화면비, 고해상도 영상.

영어 버전

A small gray cat slowly walks between window-side tables inside a cozy vintage cafe. The video lasts 5 seconds, and the cat briefly looks at the camera at the end. The camera moves smoothly at a low angle, following the cat at eye level. Warm afternoon sunlight enters through the window, creating soft shadows on the wooden tables and coffee cups. Realistic cinematic style, shallow depth of field, natural color grading, 16:9 aspect ratio, high-resolution video.

이 프롬프트는 길지만 복잡하지 않다. 한 장면 안에서 주체, 행동, 배경, 시간, 카메라, 조명, 스타일이 모두 연결되어 있다. AI가 따라야 할 방향이 분명하기 때문에 짧은 한 줄보다 안정적인 결과를 기대할 수 있다.

변형 예시: 같은 구조, 다른 결과

같은 템플릿을 유지한 채 일부 요소만 바꾸면 완전히 다른 영상이 된다.

광고 스타일

A sleek black wireless earbud case slowly rotates on a glossy dark surface. The video lasts 5 seconds, with a subtle reflection moving across the product. The camera slowly pushes in from a medium shot to a close-up. Dramatic side lighting highlights the curved edges, with a premium black and silver color palette. Minimal luxury product commercial style, 16:9 aspect ratio, high-resolution video.

여행 스타일

A traveler in a linen shirt walks along a narrow seaside street in a small Mediterranean village. The video lasts 6 seconds, with the ocean visible between white buildings. The camera follows from behind with a gentle handheld movement. Bright morning sunlight, blue and white color palette, relaxed travel vlog style, 9:16 vertical video, high-resolution.

판타지 애니메이션 스타일

A young wizard stands in an ancient forest as glowing blue fireflies swirl around their hands. The video lasts 5 seconds, and the magical light grows brighter toward the end. The camera slowly circles around the character from a medium shot. Moonlit atmosphere, soft mist, fantasy animation style, rich blue and violet colors, 16:9 aspect ratio.

세 예시는 주제는 다르지만 구조는 같다. 주체가 있고, 행동이 있고, 배경이 있으며, 카메라와 조명과 스타일이 정리되어 있다. 이 구조를 기억하면 프롬프트를 많이 외우지 않아도 직접 만들 수 있다.

넣으면 좋은 정보와 빼는 것이 나은 정보

좋은 프롬프트는 길이가 아니라 선명함으로 결정된다. 다음 정보는 영상 품질을 높이는 데 도움이 된다.

• 화면에 실제로 보이는 주체의 특징

• 한 장면 안에서 일어나는 구체적인 행동

• 카메라의 거리, 각도, 움직임

• 빛의 방향과 색감

• 영상의 지속 시간

• 화면비, 스타일, 해상도 같은 출력 조건

• 시작과 끝에서 무엇이 달라지는지

반대로 다음 정보는 결과를 흐릴 수 있다.

• 화면에 보이지 않는 긴 설정 이야기

• 서로 충돌하는 스타일 지시어

• 너무 많은 장면 변화

• 멋지게, 예쁘게, 완벽하게 같은 막연한 표현만 나열한 문장

• 한 프롬프트 안에 여러 주인공과 여러 행동을 동시에 넣는 방식

• 필요 이상으로 긴 부정 지시문

예를 들어 "외로운 과거를 가진 남자가 인생의 의미를 깨닫는 장면"은 영상으로 바로 보이기 어렵다. 대신 이렇게 바꿔 쓰는 편이 낫다.

A man sits alone at a quiet bus stop at night, looking down at an old photograph in his hands. Rain falls softly around him, and a dim streetlight creates a small pool of warm light. The camera slowly pushes in from a wide shot to a close-up of his face, showing a subtle change from sadness to calm acceptance.

내면의 이야기를 직접 설명하지 않고, 표정, 소품, 날씨, 조명, 카메라 움직임으로 바꾼 것이다.

프롬프트를 장면 단위로 생각하기

AI 비디오 프롬프트를 잘 쓰려면 "문장"보다 "장면"을 먼저 떠올리는 것이 좋다. 장면은 다음 질문으로 만들 수 있다.

• 첫 화면에는 무엇이 보이는가?

• 주체는 어떤 움직임을 하는가?

• 카메라는 가만히 있는가, 움직이는가?

• 빛과 색은 어떤 분위기를 만드는가?

• 마지막 화면은 처음과 어떻게 달라지는가?

이 다섯 질문에 답하면 대부분의 기본 프롬프트는 완성된다.

영상 프롬프트는 어려운 문장을 쓰는 기술이 아니다. 원하는 장면을 시간의 흐름에 따라 정리하는 기술이다. 주체, 행동, 배경, 시간, 카메라, 조명, 스타일을 분리해서 생각하면 어떤 프롬프트든 수정하고 확장할 수 있다. 이 기본 구조를 익혀 두면, 이후의 템플릿과 프롬프트 모음도 단순히 복사하는 데서 끝나지 않고 자신의 영상에 맞게 바꿔 쓸 수 있다.