프롬프트 기초를 익히면 곧바로 새 고민이 생깁니다. 한 장면은 꽤 멋지게 나왔는데, 다음 장면에서 주인공 얼굴이 바뀌고, 코트 색이 달라지고, 카메라는 갑자기 다른 감독의 마음을 품어 버립니다. 초보자 입장에서는 억울합니다. 분명 같은 사람, 같은 이야기, 같은 분위기였는데 결과는 매번 새 판처럼 보이기 때문입니다.
여기서 중요한 사실이 하나 있습니다. AI 영상에서는 잘 쓰는 사람보다 잘 고정하는 사람이 유리합니다. 멋진 표현을 많이 넣는 것보다, 무엇을 계속 유지하고 무엇만 바꿔야 하는지를 구분하는 능력이 더 중요합니다.
이번 장에서는 그 감각을 익힙니다. 캐릭터 일관성 유지, 멀티샷 구성, 레퍼런스 활용, 실패 원인 분석, 그리고 크레딧을 아끼는 재생성 전략까지 한 번에 정리해 보겠습니다.
일관성은 좋은 문장보다 좋은 고정에서 시작된다
AI 영상이 흔들리는 가장 큰 이유는 모델이 사람처럼 장면을 오래 기억하지 못하기 때문입니다. 첫 번째 쇼트에서 만든 인물을 두 번째 쇼트에서 자동으로 이어 가는 것이 아니라, 새 프롬프트를 받을 때마다 다시 해석하는 경향이 있습니다. 그래서 같은 인물이라고 생각해도 모델 입장에서는 매번 비슷한 문제를 새로 푸는 셈입니다.
이때 초보자가 가장 자주 하는 실수는 매 쇼트마다 설명을 조금씩 바꾸는 것입니다. 예를 들어 첫 장면에서는 짧은 검은 머리의 젊은 여성, 두 번째 장면에서는 단정한 흑발 여성, 세 번째 장면에서는 세련된 동양 여성처럼 쓰면 사람은 같은 인물을 떠올리지만 모델은 다르게 해석할 여지가 커집니다.
그래서 일관성이 필요할 때는 표현을 더 멋지게 바꾸기보다, 같은 설명을 반복하는 편이 좋습니다. 좋은 창의성은 매번 다른 수식어를 붙이는 데서 나오지 않습니다. 오히려 같은 뼈대를 계속 유지하는 데서 나옵니다.
캐릭터 앵커를 먼저 만들자
일관성을 높이고 싶다면 먼저 캐릭터 앵커를 정해야 합니다. 앵커는 말 그대로 닻입니다. 장면이 흔들려도 다시 돌아올 기준점이죠.
캐릭터 앵커에는 보통 아래 요소가 들어갑니다.
나이대
성별 또는 인상
헤어스타일
의상
체형이나 실루엣
표정 결
예를 들어 이런 식입니다.
짙은 회색 후드를 입은 마른 체형의 젊은 남성, 짧은 검은 머리, 깨끗한 얼굴, 조용한 표정
중요한 것은 이 앵커를 이후 장면에서도 가능한 한 그대로 유지하는 것입니다. 단어를 더 멋지게 바꾸려 하지 말고, 같은 조합을 계속 쓰세요.
변하지 말아야 할 것과 바꿔도 되는 것을 나눠라
AI 영상에서는 모든 것을 한꺼번에 고정하려고 하면 오히려 답답해지고, 아무것도 고정하지 않으면 장면이 흩어집니다. 그래서 좋은 방법은 고정할 것과 변화시킬 것을 나누는 것입니다.
예를 들어 이렇게 정리할 수 있습니다.
고정할 것
인물 외형
의상 색
공간 분위기
시간대
전체 색감 톤
바꿔도 되는 것
카메라 거리
인물의 작은 행동
표정의 변화
쇼트 크기
정보의 초점
이렇게 구분하면 멀티샷이 훨씬 쉬워집니다. 같은 인물, 같은 골목, 같은 저녁빛은 유지하되, 첫 쇼트는 와이드, 둘째 쇼트는 오버숄더, 셋째 쇼트는 클로즈업으로 바꾸는 식입니다.
멀티샷은 '다르게 만들기'보다 '이어지게 만들기'다
여러 장면을 연결할 때 초보자는 자꾸 매 쇼트를 새롭게 만들고 싶어 합니다. 하지만 멀티샷에서 더 중요한 것은 새로움보다 연결감입니다.
멀티샷에서 최소한 맞춰야 하는 것은 보통 네 가지입니다.
인물이 같은 사람처럼 보이는가
이동 방향이 이어지는가
공간과 조명이 같은 세계처럼 느껴지는가
감정이 앞 장면에서 다음 장면으로 흐르는가
예를 들어 첫 장면에서 인물이 왼쪽에서 오른쪽으로 걸었는데, 다음 장면에서 아무 이유 없이 반대 방향에서 나타나면 보는 사람은 바로 끊김을 느낍니다. 조명도 마찬가지입니다. 첫 컷은 비 온 저녁 골목인데, 다음 컷이 햇살 가득한 낮 장면이면 이야기가 아니라 점프컷처럼 느껴집니다.
좋은 멀티샷은 장면마다 다를 수 있어도, 같은 문장을 이어서 말하는 느낌이 있어야 합니다.
레퍼런스는 일관성을 잡아주는 가장 쉬운 도구다
텍스트만으로도 어느 정도 일관성을 만들 수 있지만, 인물이나 제품을 더 안정적으로 유지하고 싶다면 레퍼런스를 쓰는 편이 훨씬 유리합니다.
레퍼런스는 크게 두 가지입니다.
이미지 레퍼런스: 얼굴, 의상, 제품 형태, 분위기를 잡아준다.
비디오 레퍼런스: 움직임의 리듬, 동선, 카메라 흐름을 잡아준다.
초보자에게는 이미지 레퍼런스부터 시작하는 것이 가장 쉽습니다. 특히 같은 제품이나 같은 인물이 계속 나와야 할 때 효과가 큽니다.
좋은 이미지 레퍼런스는 보통 이런 특징을 가집니다.
피사체가 또렷하게 보인다.
얼굴이나 제품의 핵심 특징이 가려지지 않는다.
조명이 너무 과하지 않다.
배경이 너무 복잡하지 않다.
중요한 규칙도 하나 있습니다. 레퍼런스와 프롬프트가 싸우면 안 됩니다. 이미지에서는 회색 후드인데 텍스트에서는 갈색 가죽 재킷이라고 쓰면 모델이 흔들립니다.
일관성을 높이는 프롬프트 작성법
같은 인물을 여러 장면에 넣을 때는 프롬프트를 매번 새로 쓰기보다, 공통 앵커 블록을 만들어 두는 편이 좋습니다.
예를 들면 이런 식입니다.
same young man, dark gray hoodie, short black hair, slim build, clean face, rainy dusk alley, muted cinematic colors
그리고 쇼트마다 바뀌는 부분만 뒤에 붙입니다.
쇼트 1
same young man, dark gray hoodie, short black hair, slim build, clean face, rainy dusk alley, muted cinematic colors, walking slowly from left to right, side tracking shot
쇼트 2
same young man, dark gray hoodie, short black hair, slim build, clean face, rainy dusk alley, muted cinematic colors, stops and checks his phone, over-the-shoulder medium shot
쇼트 3
same young man, dark gray hoodie, short black hair, slim build, clean face, rainy dusk alley, muted cinematic colors, lowers the phone and gives a restrained smile, close-up with subtle push-in
이 방식의 장점은 명확합니다. 같은 사람과 같은 공간을 계속 유지하면서, 각 쇼트의 역할만 다르게 만들 수 있습니다.
실패 원인은 대개 네 가지다
결과가 어색할 때 초보자는 AI가 이상하다고 느끼기 쉽습니다. 맞는 말이기도 하지만, 실제로는 몇 가지 반복되는 원인이 있습니다.
1. 정보 부족
무엇이 나와야 하는지 너무 모호하면 AI는 자의적으로 채웁니다.
2. 정보 과잉
한 쇼트에 너무 많은 행동과 카메라 지시를 넣으면 결과가 흔들립니다.
3. 정보 충돌
밝은 한낮이라고 써 놓고 네온사인 밤거리 분위기를 요구하면 장면이 애매해집니다.
4. 앵커 부재
같은 인물과 같은 공간을 유지해야 하는데 기준점이 약하면 매 쇼트가 다른 세계처럼 보입니다.
이 네 가지를 기준으로 보면 수정 방향도 빨라집니다. 막연하게 전체를 갈아엎는 대신, 무엇이 부족한지 또는 무엇이 과한지를 골라낼 수 있기 때문입니다.
결과가 안 좋을 때는 이렇게 진단하자
초보자는 결과가 마음에 안 들면 프롬프트를 통째로 크게 바꾸기 쉽습니다. 하지만 보통은 한 가지 문제부터 잡는 편이 효율적입니다.
아래 순서로 보면 좋습니다.
피사체가 맞는가
→ 인물, 제품, 장소가 의도대로 나왔는지행동이 자연스러운가
→ 걷기, 멈춤, 손동작, 시선 이동이 어색하지 않은지카메라가 산만하지 않은가
→ 한 쇼트 안에 너무 많은 움직임이 없는지일관성이 유지되는가
→ 앞 장면과 같은 세계로 보이는지
문제를 찾은 뒤에는 그 부분만 고칩니다. 예를 들어 인물은 괜찮은데 카메라만 산만하다면, 카메라 지시만 줄이면 됩니다. 모든 요소를 한꺼번에 바꾸면 오히려 더 멀어질 수 있습니다.
재생성은 운이 아니라 전략이다
AI 영상 초보자는 재생성을 실패의 표시처럼 느끼기 쉽습니다. 하지만 실제로 재생성은 작업의 일부입니다. 중요한 것은 어떻게 다시 생성하느냐입니다.
재생성 전략은 보통 세 가지로 나눌 수 있습니다.
1. 같은 프롬프트로 다시 생성
전체 방향은 맞는데 세부가 아쉬울 때 씁니다.
2. 한 요소만 바꿔 재생성
예를 들어 카메라만 줄이거나, 행동만 단순화하거나, 시간대를 분명히 하는 식입니다.
3. 텍스트에서 레퍼런스 기반으로 전환
같은 인물이나 제품이 계속 흔들릴 때 씁니다.
이 세 가지를 구분해서 쓰면 크레딧 낭비가 크게 줄어듭니다.
크레딧을 아끼는 가장 현실적인 방법
초보자가 실전에서 가장 빨리 배우는 사실 중 하나는, 영상 생성이 생각보다 크레딧을 잘 먹는다는 점입니다. 그래서 반복 생성에는 요령이 필요합니다.
아래 습관만 지켜도 많이 절약됩니다.
처음에는 짧은 길이로 테스트한다.
품질 최고 옵션은 방향이 잡힌 뒤에 쓴다.
한 번에 긴 영상보다 쇼트 단위로 생성한다.
비슷한 프롬프트는 복사해 두고 한 요소만 바꾼다.
잘 나온 컷을 기준으로 삼아 다음 버전을 만든다.
레퍼런스를 쓸 수 있으면 초반부터 활용한다.
특히 짧게 테스트 → 방향 확인 → 좋은 버전만 고품질 재생성은 거의 기본 공식입니다.
초보자를 위한 실전 수정 예시
예를 들어 이런 결과가 나왔다고 해봅시다.
인물은 괜찮은데 걸음이 어색하다.
카메라가 갑자기 튄다.
다음 쇼트에서 얼굴이 달라진다.
이럴 때는 아래처럼 수정할 수 있습니다.
문제 1: 걸음이 어색하다
원인: 동작이 많거나 타이밍이 모호함
수정:
walking slowly, then stopping fully before looking up
완전히 멈춘 뒤라는 순서를 넣으면 무게 이동이 더 안정되기 쉽습니다.
문제 2: 카메라가 튄다
원인: 카메라 지시가 과함
수정:
smooth side tracking shot, no sudden camera movement
한 쇼트에 하나의 움직임만 남기면 훨씬 안정적입니다.
문제 3: 얼굴이 달라진다
원인: 앵커 부족
수정:
same young man, same dark gray hoodie, same short black hair, same facial features
같은 표현을 반복하는 것이 어색해 보여도, 일관성에는 도움이 됩니다.
일관성과 제어의 핵심 공식
이번 장의 핵심을 한 줄로 줄이면 이렇습니다.
고정할 것은 반복하고, 바꿀 것은 최소한으로 바꿔라.
AI 영상에서 멋진 결과를 만드는 사람은 꼭 가장 화려한 문장을 쓰는 사람이 아닙니다. 오히려 무엇을 그대로 두고, 무엇만 조정해야 하는지를 아는 사람이 더 안정적인 결과를 얻습니다.
이 장의 핵심 정리
프롬프트 심화 단계에서 가장 중요한 것은 화려한 표현이 아니라 일관성, 제어, 재생성 전략입니다. 같은 인물과 같은 세계를 유지하려면 캐릭터 앵커를 먼저 정하고, 표현을 매번 바꾸지 말고 반복해야 합니다. 멀티샷에서는 쇼트 하나하나의 멋보다 쇼트 사이의 연결감이 더 중요합니다.
또한 실패한 결과는 막연한 불운이 아니라, 대개 정보 부족, 정보 과잉, 정보 충돌, 앵커 부재 같은 이유로 설명할 수 있습니다. 이 원인을 나눠 보면 수정도 훨씬 쉬워집니다.
다음 장부터는 이제 이런 감각을 실제 도구에 적용해 볼 차례입니다. 먼저 VEO로 첫 영상을 만들면서, 지금 배운 프롬프트와 제어 감각이 실제로 어떻게 쓰이는지 확인해 보겠습니다.
이 노트는 보도·비평·교육·연구 목적으로 작성되었습니다. 저작권 문의가 있으시면 에서 알려주세요.