3. 결과가 빗나갈 때 — 진단과 수정의 3대 원칙

2장에서 우리는 프롬프트를 여섯 개 블록으로 나누어 설계하는 법을 배웠다. 이제부터는 그 반대 방향으로 가 볼 차례다. 이미 결과가 나왔고, 그런데 마음에 들지 않는다. 이때 대부분의 초보자는 같은 프롬프트로 다시 뽑기를 누른다. 운이 좋으면 비슷한 결과 중 하나가 괜찮게 나올 수도 있다. 하지만 이 방식은 오래 못 간다. 원하는 결과를 반복해서 얻지 못하기 때문이다.

실력이 붙는 사람은 여기서 갈린다. 다시 뽑는 사람이 아니라, 어디가 빗나갔는지 읽어내는 사람이 된다. 결과를 보면 원인을 짐작하고, 원인을 알면 수정이 짧아진다. 결국 프롬프트 작업은 창작이면서 동시에 디버깅이다. 디버깅이란 고장 난 지점을 찾아내는 일이다.

이 장에서는 그 디버깅 감각을 익힌다. 핵심은 세 가지다.

• 단순화한다.

• 모순을 제거한다.

• 유지할 것을 먼저 고정하고, 바꿀 것을 나중에 건드린다.

이 세 가지만 제대로 익혀도 실패한 결과 앞에서 덜 당황하게 된다. 모델이 말을 안 듣는 것처럼 보여도, 실제로는 너무 많은 말을 듣고 헷갈린 경우가 많다.

3.1 빗나간 결과를 5분 안에 진단하는 체크리스트

결과가 이상할 때 가장 먼저 해야 할 일은 프롬프트를 더 길게 쓰는 것이 아니다. 먼저 어떤 종류의 실패인지 분류해야 한다. 분류가 되면 수정 방향이 거의 자동으로 정해진다.

가장 쉬운 방법은 결과를 보고 여섯 블록 중 어디서 문제가 났는지 체크하는 것이다. 아래 순서대로 보면 된다.

1단계: 주제가 맞는가

가장 먼저 볼 것은 화면의 중심이다. 내가 만들고 싶던 대상이 맞게 나왔는지, 수량이 맞는지, 핵심 특징이 유지됐는지를 확인한다.

예를 들어 한 사람을 원했는데 두 사람이 나오거나, 빨간 코트를 입혀야 하는데 검은 재킷이 나오거나, 머그컵이 주인공이어야 하는데 배경 소품처럼 작게 묻혀 있다면 문제는 대체로 주제 블록에 있다. 이때는 스타일을 바꾸기 전에 주제를 더 또렷하게 써야 한다.

2단계: 동작이 맞는가

주제는 맞는데 장면이 죽어 있는 경우가 있다. 바리스타가 라테를 따르고 있어야 하는데 그냥 카메라를 보고 서 있거나, 아이가 달리는 장면이어야 하는데 멈춰 서 있는 식이다. 이런 경우는 동작 블록이 약하다.

형용사가 많고 동사가 약하면 이런 일이 잘 생긴다. 모델은 분위기보다 행동 단서에 더 잘 반응할 때가 많다.

3단계: 배경이 맞는가

장면의 공기감이 다르면 배경을 의심해야 한다. 실내 스튜디오처럼 나오는데 실제로는 비 오는 골목이어야 했거나, 아침이어야 하는데 한밤중처럼 보인다면 배경 블록이 흐린 것이다. 장소, 시간, 날씨 중 한두 가지가 비어 있을 가능성이 크다.

4단계: 스타일이 맞는가

구성은 맞는데 결과가 싸 보이거나, 너무 만화 같거나, 지나치게 광고 같거나, 반대로 너무 밋밋한 경우가 있다. 이때는 스타일 블록을 본다. 많은 경우 "사실적", "예쁘게", "시네마틱" 같은 넓은 단어만 던져 놓고 끝냈기 때문에 방향이 흔들린다.

5단계: 카메라와 조명이 맞는가

인물은 맞는데 얼굴이 부자연스럽게 넓어 보이거나, 제품은 맞는데 입체감이 없거나, 전체가 납작하게 보인다면 카메라 블록 문제가 많다. 렌즈, 시점, 조명이 없거나 서로 안 맞는 표현이 섞였을 수 있다.

6단계: 제약이 필요한가

마지막으로 보이는 문제는 대개 여기서 걸린다. 원하지 않는 텍스트가 끼어들고, 손가락이 이상하고, 물건이 하나 더 생기고, 배경에 쓸데없는 군중이 들어온다면 제약 블록을 점검한다. 다만 제약은 마지막에 넣는 것이 좋다. 앞의 다섯 블록이 흐린데 제약만 늘리면 더 복잡해지기 쉽다.

5분 진단용 빠른 질문

작업 중에는 아래 질문만 순서대로 던져도 꽤 많은 문제가 잡힌다.

• 무엇이 주인공인지 한눈에 보이는가

• 그 주인공이 내가 원한 행동을 하고 있는가

• 장소와 시간이 맞는가

• 결과물의 미감이 용도와 맞는가

• 시점과 빛이 장면을 살리고 있는가

• 꼭 막아야 할 오류만 제약으로 지정했는가

이 여섯 질문은 결국 2장의 여섯 블록을 뒤집어 읽는 것이다. 설계할 때도 여섯 블록, 고칠 때도 여섯 블록이다.

증상별 빠른 원인 찾기

중요한 점은 하나다. 문제 하나당 수정 하나로 가는 편이 좋다. 한 번에 여섯 군데를 동시에 바꾸면 무엇이 효과가 있었는지 알 수 없다.

3.2 원칙 1: 단순화 — 형용사 20개 vs 동사 1개, 어느 쪽이 이기는가

프롬프트가 길다고 좋은 것은 아니다. 오히려 결과가 안 나올수록 초보자는 문장을 점점 더 길게 만드는 경향이 있다. 감성적인, 아름다운, 정교한, 압도적인, 디테일한, 초현실적인, 영화 같은, 고급스러운, 아련한, 예술적인 같은 단어를 계속 덧붙인다. 이런 말은 사람끼리 대화할 때는 분위기를 전하지만, 모델에게는 방향보다 소음을 주기 쉽다.

반대로 짧은 동사 하나는 장면을 크게 바꾼다. 걷는다, 기울인다, 쥔다, 올려다본다, 쏟는다, 기대어 선다. 이런 말에는 자세, 시선, 구도, 순간성이 함께 들어 있다.

단순화는 정보를 버리는 일이 아니라, 덜 중요한 말을 치우고 중요한 말을 앞으로 당기는 일이다.

왜 형용사보다 동사가 강한가

형용사는 해석의 폭이 넓다. "세련된"은 사람마다 다르게 상상한다. 하지만 "검은 우산을 접으며 돌아본다"는 비교적 구체적인 장면이다. 모델은 이런 장면 단서를 잡기 쉽다.

그래서 결과가 빗나갔을 때는 먼저 형용사 더하기를 멈추고, 아래 세 가지를 점검하는 편이 효과적이다.

• 주인공이 누구인지

• 그가 무엇을 하는지

• 어디에 있는지

이 세 개가 선명하면 나머지는 그 뒤에 붙여도 늦지 않다.

길지만 약한 프롬프트와 짧지만 강한 프롬프트

예를 들어 보자.

약한 프롬프트
아름답고 감성적이며 영화 같고 아주 디테일하고 세련된 분위기의 멋진 여성 초상, 고급스럽고 우아하고 현실적이며 예술적인 느낌.

이 문장은 그럴듯해 보이지만 실제로 결정된 것이 거의 없다. 누가 있는지, 무엇을 하는지, 어디에 있는지, 어떤 시점인지가 없다.

강한 프롬프트
짙은 단발머리의 여성이 창가에 팔꿈치를 기대고 비 오는 거리 쪽을 바라본다, 늦은 오후의 카페 실내, 절제된 잡지 화보 톤, 50mm eye-level, no text.

두 번째 문장은 더 짧아도 훨씬 많은 것을 결정한다. 인물, 행동, 시선, 장소, 시간, 스타일, 카메라가 들어 있다.

단순화의 실제 절차

결과가 안 좋을 때는 아래 순서로 줄여 보자.

1. 감정어와 칭찬어를 지운다.
   예쁘게, 멋지게, 최고 퀄리티, masterpiece 같은 말부터 뺀다.

2. 주제와 동사만 남긴다.
   누가 무엇을 하는지 한 문장으로 다시 쓴다.

3. 배경 한 줄만 붙인다.
   장소와 시간 정도만 붙인다.

4. 스타일 한 조각만 넣는다.
   사진인지, 일러스트인지, 광고 톤인지 정도만 남긴다.

5. 카메라와 제약은 꼭 필요한 것만 더한다.
   처음부터 복잡하게 넣지 않는다.

이렇게 줄이고 다시 돌려 보면, 오히려 결과가 더 잘 맞는 경우가 많다. 긴 프롬프트를 쓰지 말라는 뜻은 아니다. 긴 프롬프트도 중심이 선명할 때만 강하다는 뜻이다.

단순화 전후 비교

전
초고해상도, 매우 디테일함, 감성적이고 따뜻하며 아름답고 우아한, 영화 같은, 극도로 사실적인, 소셜 미디어 바이럴 느낌의 강아지 사진

후
갈색 푸들이 소파 위에서 앞발로 쿠션을 눌러 기대앉아 카메라를 본다, 아침 햇살이 들어오는 거실, 자연광 반려동물 사진, 50mm, no text.

전자는 칭찬이 많고 장면이 적다. 후자는 장면이 있고 칭찬은 거의 없다. 결과는 대개 후자 쪽이 더 안정적이다.

3.3 원칙 2: 모순 제거 — "미니멀한 배경 + 디테일한 디자인" 같은 충돌어 찾기

프롬프트가 실패하는 가장 흔한 이유 중 하나는 정보 부족이 아니라 정보 충돌이다. 모델은 말을 듣지 않는 것이 아니라, 서로 다른 말을 동시에 듣고 있는 경우가 많다.

예를 들어 이런 식이다.

• 미니멀한 배경인데 복잡한 도시 간판이 가득함

• 자연광 사진인데 강한 스튜디오 스포트라이트를 원함

• 플랫한 벡터 일러스트인데 사실적인 피부 질감을 요구함

• 제품은 그대로 두라고 하면서 각도, 재질, 색상까지 모두 바꾸라고 함

사람은 이런 모순을 문맥으로 적당히 해석할 수 있다. 하지만 모델은 그 사이 어딘가를 어색하게 섞어 내기 쉽다. 그래서 결과는 보통 둘 다 아닌 애매한 것이 된다.

모순은 주로 어디서 생기는가

모순은 대체로 세 곳에서 자주 생긴다.

첫째는 스타일과 스타일 사이다. 사진과 일러스트, 다큐와 광고, 미니멀과 화려함처럼 시각 언어가 충돌한다.

둘째는 배경과 제약 사이다. 복잡한 시장 장면을 원하면서 clean background를 넣거나, 사람 많은 축제 장면을 원하면서 one subject only를 넣는 식이다.

셋째는 유지와 변경 사이다. 얼굴은 유지하라면서 헤어스타일, 나이, 표정, 메이크업, 조명을 전부 바꾸라고 하면 사실상 같은 얼굴이 유지되기 어렵다.

충돌어를 찾는 법

결과가 애매하면 프롬프트를 읽으면서 접속사를 눈으로 찾아보자. 특히 "하지만", "동시에", "그리고" 뒤에 붙은 말이 서로 싸우는 경우가 많다. 문장을 둘로 잘라 보고, 한쪽이 다른 쪽을 무너뜨리는지 확인하면 된다.

예를 들어 아래 문장은 흔한 충돌 사례다.

문제 프롬프트
미니멀한 흰 배경의 제품 사진, 주변에 다양한 소품과 화려한 컬러 장식이 가득한 장면, 아주 깔끔한 구성.

여기에는 세 가지 욕심이 동시에 들어 있다. 미니멀, 소품 가득, 아주 깔끔. 셋이 완전히 양립하지는 않는다.

이럴 때는 목적을 먼저 정해야 한다. 제품만 또렷하게 보이는 것이 목표인지, 라이프스타일 연출이 목표인지가 먼저다.

수정 1: 팩샷 우선
스킨케어 제품 한 병이 흰 배경 중앙에 놓여 있다, 얇은 바닥 그림자만 있는 스튜디오 팩샷, 절제된 상업 사진, 50mm, no extra props, no text.

수정 2: 연출컷 우선
스킨케어 제품 한 병이 대리석 세면대 위에 놓여 있다, 옆에 접힌 수건과 작은 식물, 아침 햇살이 드는 욕실, 라이프스타일 제품 사진, 50mm, clean composition, no text.

둘 중 하나만 택하면 장면이 선명해진다.

모순 제거의 기준은 한 문장으로 정리된다

한 장면에 한 개의 우선순위만 세운다.

포스터면 포스터답게, 팩샷이면 팩샷답게, 스토리 장면이면 스토리 장면답게 가야 한다. 중간에서 다 가지려 하면 오히려 다 놓친다.

자주 부딪히는 충돌쌍

모순을 없애면 프롬프트는 더 짧아지지만 결과는 더 또렷해진다. 정리되지 않은 욕심을 버리는 순간, 모델은 오히려 더 말을 잘 듣는다.

3.4 원칙 3: 유지 먼저, 변경 나중 — 인물 편집에서 얼굴이 바뀌지 않게 하는 법

이미지를 처음부터 생성하는 것과, 이미 있는 이미지를 편집하는 것은 다르다. 편집에서는 새로 만들기보다 무엇을 지킬 것인가가 더 중요하다. 많은 사람이 여기서 실수한다. 바꾸고 싶은 것부터 길게 설명하고, 유지해야 할 것은 짧게 말한다. 그러면 모델은 전체를 다시 해석해 버리기 쉽다.

편집 프롬프트의 기본 문법은 단순하다.

유지할 것 먼저, 변경할 것 나중.

이 순서만 지켜도 얼굴이 바뀌는 사고, 제품 로고가 사라지는 사고, 캐릭터 의상이 갈아엎어지는 사고가 크게 줄어든다.

왜 유지가 먼저인가

모델 입장에서 편집은 "원본을 조금 바꾸기"이기도 하지만, 때로는 "원본을 참고해 다시 만들기"에 가깝게 동작한다. 이때 고정점이 먼저 주어져야 한다. 고정점이 없으면 모델은 바꾸라는 말만 크게 듣는다.

예를 들어 "배경을 해변으로 바꿔 줘"라고만 쓰면 인물의 조명, 머리카락, 옷, 표정까지 함께 바뀔 수 있다. 반면 "인물의 얼굴, 헤어스타일, 의상은 유지하고 배경만 해변으로 바꿔 줘"라고 쓰면 변경 범위가 좁아진다.

유지 우선 프롬프트 구조

편집할 때는 아래 구조가 안정적이다.

1. 유지 대상 선언
   얼굴, 헤어스타일, 의상, 제품 형태, 로고 위치처럼 꼭 고정할 요소를 먼저 적는다.

2. 변경 대상 선언
   배경, 조명, 포즈, 소품, 색감처럼 바꾸려는 요소를 적는다.

3. 변경 범위 제한
   only change background, keep composition, do not alter facial features처럼 범위를 닫아 준다.

4. 필요한 제약만 추가
   no extra people, no text, no additional accessories처럼 새 오류를 막는다.

인물 편집 예시

문제 프롬프트
이 사람을 해변에서 찍은 여름 사진처럼 바꿔 줘.

이 문장은 너무 넓다. 결과적으로 배경만 바뀌는 것이 아니라 인물의 인상까지 달라질 수 있다.

개선 프롬프트
인물의 얼굴 구조, 헤어스타일, 표정, 흰 셔츠는 그대로 유지하고, 배경만 맑은 여름 해변으로 변경, 오후 자연광에 맞게 전체 조명만 부드럽게 조정, 구도는 유지, no extra people, no text.

여기서는 유지 대상과 변경 대상이 분리돼 있다. 모델이 무엇을 건드리지 말아야 하는지 더 분명하다.

제품 편집 예시

문제 프롬프트
이 향수를 더 고급스럽게 바꿔 줘.

"고급스럽게"는 넓고 모호하다. 병 모양이 바뀌어 버릴 수도 있다.

개선 프롬프트
향수 병의 형태, 라벨 위치, 병 색상은 유지하고, 배경만 검은 아크릴 테이블과 어두운 그라데이션 배경으로 변경, 유리 표면에 얇은 하이라이트를 추가, 하이엔드 광고 사진 톤, centered composition, no extra props, no text.

이렇게 쓰면 제품 정체성은 지키면서 분위기만 올릴 수 있다.

얼굴이 자꾸 바뀔 때의 우선순위

인물 편집에서 특히 중요한 것은 유지 요소의 순서다. 보통 아래 순서대로 고정하는 편이 효과적이다.

• 얼굴 구조와 인상

• 헤어스타일과 머리색

• 핵심 의상

• 구도와 포즈

• 배경과 소품

이 순서는 왜 중요할까. 얼굴 구조가 가장 정체성에 가깝기 때문이다. 반대로 배경은 상대적으로 바꾸기 쉬운 요소다. 쉬운 것부터 바꾸면 유지가 안정되고, 어려운 것부터 바꾸면 정체성이 흔들린다.

멀티턴 편집에서 더 안전한 방식

한 번에 다 바꾸려 하지 말고 단계적으로 바꾸는 것도 좋다. 예를 들어 인물 사진 편집이라면 이렇게 간다.

• 1차: 얼굴과 의상 유지, 배경만 교체

• 2차: 배경은 유지, 조명만 보정

• 3차: 소품만 추가

이렇게 나누면 어디서 망가졌는지 추적하기 쉽다. 편집은 보통 한 번에 끝내려 할수록 오히려 오래 걸린다.

3.5 SD 1.5 시대의 유물 — "8K, masterpiece, ultra realistic"이 왜 이제는 노이즈인가

이미지 생성 초창기 커뮤니티에는 일종의 주문 같은 단어들이 많았다. 8K, masterpiece, best quality, ultra detailed, award-winning, ultra realistic 같은 말들이다. 한때는 이런 단어가 어느 정도 체감상 도움이 된다고 느낀 사람도 많았다. 특히 모델이 지금보다 덜 정교했고, 사용자가 우회적으로 품질을 끌어올리려 하던 시절에는 그럴 만한 배경이 있었다.

하지만 지금은 상황이 많이 달라졌다. 최신 모델일수록 긴 칭찬어 묶음보다 장면의 구조와 의도를 더 중요하게 읽는 경향이 크다. 그래서 옛날식 품질 주문은 종종 도움이 되기보다 문장을 흐리게 만든다.

왜 이런 단어가 노이즈가 되는가

첫째, 정보 가치가 낮다.
8K라고 적어도 실제로는 해상도 설정이나 출력 파이프라인이 더 중요할 때가 많다. 장면 내용이 빈약하면 8K는 별 의미가 없다.

둘째, 의미가 너무 넓다.
masterpiece는 무엇을 뜻하는가. 회화인가, 사진인가, 광고인가, 콘셉트 아트인가. 모델 입장에서는 너무 추상적이다.

셋째, 핵심 단서를 뒤로 밀어낸다.
진짜 중요한 건 인물이 무엇을 하는지, 어떤 구도인지, 어떤 배경인지인데 품질 수식어가 앞을 차지하면 중심이 흐려진다.

언제 버리고, 무엇으로 바꿀까

무조건 쓰면 안 된다는 뜻은 아니다. 다만 품질 주문 대신 관찰 가능한 지시로 바꾸는 편이 훨씬 낫다.

예를 들어 아래처럼 바꾸면 된다.

• 8K → clean studio lighting, sharp focus, high detail on fabric

• masterpiece → editorial fashion photo, premium commercial look

• ultra realistic → natural skin texture, realistic proportions, true-to-life lighting

• cinematic → moody contrast, soft rim light, wide frame, filmic color grading

차이가 보일 것이다. 왼쪽은 칭찬이고, 오른쪽은 관찰 가능한 조건이다.

오래된 습관을 버리는 법

가장 쉬운 방법은 프롬프트를 다 쓴 다음 아래 단어들을 지워 보고도 문장이 성립하는지 확인하는 것이다.

• masterpiece

• best quality

• ultra detailed

• 8K

• award-winning

• highly detailed

• epic

• stunning

지워도 뜻이 거의 안 바뀐다면, 대개 없어도 되는 말이다. 반대로 지우면 장면이 무너지는 단어는 핵심 정보일 가능성이 높다.

요즘식으로 다시 쓰기

옛날식 프롬프트
masterpiece, best quality, 8K, ultra realistic, highly detailed portrait of a woman

다시 쓴 프롬프트
30대 여성의 상반신 초상, 카메라를 보지 않고 창밖을 바라본다, 흐린 오후의 실내 자연광, 절제된 매거진 포트레이트 사진, 85mm, soft shadow, no text.

후자는 무슨 이미지를 원하는지 알 수 있다. 전자는 "좋은 그림이어야 한다"는 바람만 있다. 모델은 바람보다 조건을 더 잘 이해한다.

3.6 망친 프롬프트 30개 → 고친 프롬프트 30개 비교

이제 가장 실전적인 연습을 해 보자. 아래 예시들은 일부러 자주 하는 실수를 섞어 만든 것이다. 고친 버전을 보면서 무엇이 달라졌는지 읽어 보면 감이 빨리 붙는다.

이 30개를 가만히 보면 공통점이 있다. 망한 프롬프트는 대부분 하나 이상에 걸린다.

• 주제가 흐리다.

• 동작이 없다.

• 모순이 있다.

• 유지와 변경이 섞여 있다.

• 품질 칭찬어가 핵심 정보를 밀어낸다.

반대로 고친 프롬프트는 대체로 같은 방향을 따른다. 누가, 무엇을, 어디서, 어떤 방식으로 보여야 하는지가 먼저 나온다. 그다음에 꼭 필요한 제약만 붙는다.

다시 뽑기 전에, 먼저 읽어라

결과가 마음에 들지 않을 때 가장 아쉬운 습관은 무의식적인 재시도다. 같은 프롬프트를 열 번 돌리는 것보다, 한 번 결과를 읽고 한 줄을 고치는 편이 더 빨리 늘 때가 많다. 프롬프트 설계는 쓰는 기술이기도 하지만, 읽는 기술이기도 하다. 결과를 읽고, 원인을 읽고, 프롬프트를 다시 읽는 힘이 쌓여야 한다.

이번 장의 세 원칙을 마지막으로 한 번만 정리하자.

• 결과가 흐리면 먼저 단순화한다.

• 결과가 이상하게 섞이면 모순을 제거한다.

• 편집에서 무너진다면 유지할 것을 먼저 고정한다.

이 세 가지는 별것 아닌 것처럼 보이지만, 실제 작업에서는 엄청난 차이를 만든다. 같은 모델을 써도 누군가는 운에 기대고, 누군가는 점점 덜 틀린다. 그 차이가 바로 진단과 수정의 습관이다.

다음 장에서는 이 습관을 한 단계 더 밀어붙인다. 한 번 잘 나온 이미지를 끝내지 않고, 캐릭터와 제품과 브랜드의 일관성으로 연결하는 법을 다룰 것이다. 한 장을 잘 만드는 능력과, 열 장을 같은 세계로 묶는 능력은 다르다. 그리고 그 차이 역시 결국은 무엇을 유지하고 무엇을 바꿀지 아는 데서 시작된다.