프롬프트를 조금만 오래 써 보면 이상한 순간이 찾아온다. 분명히 답은 그럴듯한데 막상 업무에 쓰려니 손이 멈춘다. 사실 확인이 필요하고, 빠진 항목이 있고, 형식이 들쭉날쭉하고, 말투도 애매하다. 읽을 때는 괜찮아 보였는데 붙여 넣어 실무에 넣는 순간 문제가 드러나는 것이다.
중급 사용자가 여기서 배워야 하는 핵심은 하나다. 좋은 결과를 느낌으로 판단하지 말고, 기준으로 판단해야 한다는 점이다. "이번엔 좀 별론데?"라는 말로는 개선이 어렵다. 무엇이 별로였는지, 어떤 점이 기준에 못 미쳤는지, 다음에는 무엇을 고쳐야 하는지 말할 수 있어야 프롬프트가 발전한다.
이 장에서는 좋은 출력의 기준을 다섯 가지로 정리한다. 정확성, 완성도, 형식 준수, 톤 적합성, 실무 사용 가능성이다. 이 다섯 기준은 거의 모든 업무 프롬프트를 평가할 때 기본 뼈대로 쓸 수 있다.
왜 먼저 기준부터 세워야 할까
많은 사람이 프롬프트 개선을 이렇게 한다. 답이 마음에 안 들면 문장을 조금 바꾸고, 다시 돌려 보고, 또 안 되면 예시를 추가한다. 이런 방식은 초반에는 효과가 있다. 하지만 반복 업무로 넘어가면 곧 한계가 온다. 어떤 수정이 실제로 좋아진 것인지, 단지 우연히 이번 한 번만 잘 나온 것인지 구분하기 어렵기 때문이다.
기준이 없으면 프롬프트 개선은 늘 감에 기대게 된다. 반대로 기준이 있으면 같은 결과를 보고도 훨씬 선명하게 판단할 수 있다. 예를 들어 "답이 별로다"가 아니라 "사실은 맞지만 핵심 항목이 두 개 빠져서 완성도가 낮다", 혹은 "내용은 괜찮지만 지정한 표 형식을 지키지 않아 후속 자동화에 바로 넣기 어렵다"처럼 말할 수 있다.
이 차이는 크다. 전자는 불만이고, 후자는 개선 지시다. 중급 프롬프트 설계는 바로 이 지점에서 시작된다.
좋은 결과는 한 가지만 잘해서는 안 된다
실무에서는 흔히 한 기준만 보고 결과를 칭찬하거나 버린다. 그러나 실제로는 여러 기준이 동시에 맞아야 한다.
예를 들어 시장 동향 요약을 시켰다고 해 보자. 내용이 사실과 맞으면 정확성은 높다. 하지만 경쟁사 정보가 빠져 있으면 완성도가 낮다. 또 표로 달라고 했는데 자유서술로 오면 형식 준수에 실패한 것이다. 임원 보고용인데 지나치게 가벼운 말투라면 톤 적합성도 떨어진다. 마지막으로 길이가 지나치게 길어 한눈에 의사결정을 못 돕는다면 실무 사용 가능성도 낮다.
즉, 좋은 결과는 "똑똑해 보이는 답"이 아니라 바로 쓸 수 있는 답이다. 이 장의 다섯 기준은 그 "바로 쓸 수 있음"을 눈에 보이게 만드는 도구다.
첫 번째 기준: 정확성
정확성은 가장 기본이 되는 기준이다. 틀린 사실, 왜곡된 해석, 잘못된 계산, 근거 없는 단정이 없어야 한다. 아무리 문장이 매끄럽고 형식이 아름다워도 사실이 틀리면 좋은 결과라고 부를 수 없다.
하지만 정확성은 생각보다 단순하지 않다. 실무에서 정확성은 단지 "사실이 맞다"에서 끝나지 않는다. 다음과 같은 질문까지 포함한다.
입력 자료에 없는 내용을 지어내지 않았는가
숫자, 날짜, 이름, 조건을 바르게 반영했는가
요약 과정에서 원문의 의미를 바꾸지 않았는가
확실하지 않은 내용을 확실한 것처럼 쓰지 않았는가
예를 들어 회의록 요약에서 "검토해 보자"를 "도입하기로 결정했다"로 바꾸면 문장은 그럴듯해도 정확성은 크게 무너진다. 고객지원 답변에서 정책에 없는 보상 기준을 단정적으로 쓰는 것도 마찬가지다. 교육 자료에서 아직 배우지 않은 개념을 사실처럼 단순화해 말하는 것도 정확성 문제다.
정확성을 평가할 때 중요한 점은 모르는 것을 모른다고 말할 수 있는가이다. AI가 가장 위험해지는 순간은 빈칸을 억지로 채우는 때다. 따라서 좋은 출력은 아는 정보는 분명히 말하고, 불확실한 부분은 불확실하다고 표시한다.
정확성은 다른 모든 기준의 바닥이다. 바닥이 흔들리면 그 위의 완성도, 형식, 톤은 아무 의미가 없다.
두 번째 기준: 완성도
정확한 답이 항상 충분한 답은 아니다. 실무에서는 맞는 말 몇 줄보다, 필요한 요소가 빠짐없이 들어간 결과가 더 중요할 때가 많다. 이때 보는 기준이 완성도다.
완성도는 과업이 요구한 구성 요소를 제대로 채웠는지를 묻는다. 쉽게 말해 "해야 할 말을 다 했는가"에 대한 평가다.
예를 들어 채용 공고 요약을 부탁했는데 직무 내용은 잘 정리했지만 지원 자격, 마감일, 제출 서류가 빠졌다면 정확할 수는 있어도 완성도는 낮다. 상품 리뷰 분석에서 장점만 정리하고 불만 포인트를 빼먹어도 같은 문제다. 수업 자료 초안을 만들 때 개념 설명은 잘했지만 예시와 연습문제가 없다면 현장에서는 바로 쓰기 어렵다.
완성도를 높이려면 먼저 과업의 필수 구성 요소를 분명히 해야 한다. 많은 프롬프트 실패는 모델이 모자라서가 아니라, 설계자가 "무엇이 빠지면 안 되는지"를 명확히 적지 않아서 생긴다.
완성도를 볼 때 특히 유용한 질문은 다음과 같다.
이 결과를 받은 사람이 다시 물어봐야 할 것이 남아 있는가
의사결정이나 다음 작업에 필요한 핵심 정보가 빠졌는가
요구한 범위를 고르게 다뤘는가, 아니면 일부에만 치우쳤는가
정확성이 "틀리지 않음"이라면, 완성도는 "빠지지 않음"에 가깝다. 둘은 비슷해 보여도 다르다. 이 차이를 구분할 줄 알아야 평가가 정교해진다.
세 번째 기준: 형식 준수
초급 단계에서는 내용만 괜찮으면 만족하기 쉽다. 하지만 중급 단계부터는 출력 형식이 품질의 핵심이 된다. 왜냐하면 결과가 다음 작업으로 이어져야 하기 때문이다.
형식 준수는 모델이 요청한 출력 구조를 제대로 따랐는지를 보는 기준이다. 예를 들어 표로 달라고 했는지, 항목 수를 지켰는지, JSON 필드명이 맞는지, 제목과 본문 구조를 구분했는지, 금지한 형식을 피했는지를 살핀다.
이 기준이 중요한 이유는 실무에서 결과가 읽기용으로만 쓰이지 않기 때문이다. 복사해서 메일로 보내고, 스프레드시트에 붙여 넣고, 자동화 도구로 넘기고, 팀 문서 양식에 맞춰 저장해야 한다. 이때 형식이 조금만 어긋나도 사람이 다시 손으로 고쳐야 한다. 그러면 AI가 시간을 아껴 준 것이 아니라 새로운 정리 업무를 만든 셈이다.
형식 준수는 특히 이런 상황에서 중요하다.
일정한 열 구조를 가진 표를 반복 생성할 때
다른 시스템으로 넘길 JSON이나 CSV 유사 형식을 만들 때
정해진 보고서 템플릿이나 회의록 양식을 따라야 할 때
글자 수, 항목 수, 문단 수 제한이 있는 콘텐츠를 만들 때
여기서 중요한 오해 하나가 있다. 형식 준수는 보기 좋음을 뜻하지 않는다. 보기 좋은 표와 쓰기 좋은 표는 다를 수 있다. 실무에서는 장식보다 일관성이 더 중요하다. 같은 작업을 열 번 했을 때 열 번 모두 같은 구조로 나오는 것이 중급 프롬프트의 힘이다.
네 번째 기준: 톤 적합성
같은 내용도 어떤 말투로 쓰느냐에 따라 완전히 다른 결과가 된다. 고객에게 보내는 안내문, 팀 내부 회의록, 초등학생 대상 설명, 임원 보고용 메모는 모두 다른 톤을 요구한다. 그래서 좋은 출력은 단지 맞는 말을 하는 데서 끝나지 않고, 누구에게 어떻게 들려야 하는가까지 맞춰야 한다.
톤 적합성은 독자와 상황에 맞는 언어 수준, 예의, 거리감, 전문성, 감정 온도를 지켰는지를 보는 기준이다.
예를 들어 고객 불만 대응 문장인데 지나치게 건조하면 차갑게 느껴질 수 있다. 반대로 법적 안내가 필요한 문장인데 지나치게 친근하면 신뢰를 떨어뜨릴 수 있다. 사내 보고서 초안인데 광고 카피처럼 과장된 표현이 많아도 부적절하다. 교육용 설명인데 용어가 너무 어려우면 이해를 방해한다.
톤 적합성을 판단할 때는 이런 질문이 유용하다.
이 글을 실제 독자가 읽었을 때 자연스럽다고 느낄까
상황에 맞는 예의와 거리감을 지켰는가
지나치게 공격적이거나 과장되거나 모호하지 않은가
독자의 지식 수준에 맞는 단어를 사용했는가
톤은 취향처럼 보일 수 있지만, 실무에서는 분명한 기준이 된다. 예를 들어 고객지원에서는 공감과 명확성이 중요하고, 기획 문서에서는 단정한 표현과 논리 흐름이 중요하며, 교육 문서에서는 쉬운 설명과 부담 없는 안내가 중요하다. 즉 톤은 아름다운 문체 경쟁이 아니라, 목적에 맞는 전달 방식의 문제다.
다섯 번째 기준: 실무 사용 가능성
이 기준은 앞의 네 가지를 한 번 더 현실에 연결한다. 정확하고, 빠짐없고, 형식도 맞고, 톤도 좋아 보이는데도 막상 업무에 못 쓰는 결과가 있다. 왜 그럴까. 실제 행동으로 이어지지 않기 때문이다.
실무 사용 가능성은 결과가 바로 다음 단계에 투입될 수 있는지를 묻는다. 읽고 끝나는 답이 아니라, 붙여 넣고 보내고 검토하고 결정할 수 있는 답이어야 한다.
예를 들어 경쟁사 분석 요약이 지나치게 장황해 핵심 비교가 안 되면 실무 사용 가능성이 낮다. 회의 액션 아이템 정리에서 담당자와 기한이 빠져 있으면 실행으로 이어지지 않는다. 고객지원 응답 초안에서 회사 정책상 반드시 들어가야 할 안내 문구가 없다면 실제 발송이 어렵다. 마케팅 카피 초안이 여러 개 나왔더라도 채널별 길이 제한이 맞지 않으면 다시 손봐야 한다.
실무 사용 가능성을 평가할 때는 다음 질문이 핵심이다.
이 결과를 그대로, 혹은 최소 수정만 거쳐 바로 쓸 수 있는가
다음 작업자가 추가 해석 없이 이어서 일할 수 있는가
의사결정에 필요한 정보가 한눈에 정리되어 있는가
실제 조직의 규칙, 정책, 워크플로와 충돌하지 않는가
이 기준은 특히 중요하다. 왜냐하면 현업에서 AI의 가치는 "와, 잘 썼다"가 아니라 "좋아, 이걸로 바로 진행하자"에서 드러나기 때문이다.
다섯 기준은 서로 어떻게 다른가
처음에는 이 다섯 항목이 비슷하게 느껴질 수 있다. 하지만 구분할수록 평가가 선명해진다.
정확성은 틀렸는지를 본다. 완성도는 빠졌는지를 본다. 형식 준수는 약속한 구조를 지켰는지를 본다. 톤 적합성은 사람과 상황에 맞는 표현인지를 본다. 실무 사용 가능성은 실제 작업 흐름에 바로 들어갈 수 있는지를 본다.
예를 들어 보자.
"신제품 출시 회의 내용을 5줄로 요약하고, 다음 액션 3개를 표로 정리해 달라"는 요청이 있었다고 하자.
한 결과가 회의 내용을 사실대로 잘 요약했다면 정확성은 높다. 그러나 출시 일정, 대상 고객, 위험 요소 중 하나를 빼먹었다면 완성도는 낮다. 또 액션 3개를 표로 달라는 요청을 무시하고 문단으로 썼다면 형식 준수도 낮다. 문체가 지나치게 장난스럽다면 톤 적합성도 떨어진다. 마지막으로 담당자와 마감일이 없어 실행 회의에 바로 쓰지 못한다면 실무 사용 가능성도 낮다.
이처럼 한 결과는 다섯 기준에서 서로 다른 점수를 받을 수 있다. 바로 그 차이를 읽어 내는 힘이 프롬프트 개선의 출발점이다.
실무에서 자주 생기는 오판
좋은 기준을 세우려면 먼저 자주 하는 착각도 알아야 한다.
첫째, 문장이 유창하면 좋은 결과라고 착각하기 쉽다. 하지만 말이 매끈한 것과 내용이 맞는 것은 다른 문제다. AI는 자신감 있는 문장으로 틀린 내용을 말할 수도 있다.
둘째, 길면 성실하다고 느끼기 쉽다. 하지만 길다는 것은 종종 핵심이 흐려졌다는 뜻이기도 하다. 필요한 정보를 짧고 분명하게 주는 결과가 실무에서는 더 가치 있다.
셋째, 한 번 잘 나오면 안정적이라고 믿기 쉽다. 그러나 중급에서 중요한 것은 재현성이다. 같은 프롬프트를 다른 입력에 써도 기준을 꾸준히 만족해야 한다.
넷째, 본인이 이해되면 독자도 이해할 것이라고 생각하기 쉽다. 하지만 톤과 난이도는 항상 대상 독자를 기준으로 봐야 한다.
다섯째, 약간만 손보면 되니까 괜찮다고 넘기기 쉽다. 그러나 반복 업무에서는 "매번 약간 손보는 일"이 결국 큰 비용이 된다. 실무 사용 가능성은 바로 이 숨은 수작업 비용을 드러내는 기준이다.
기준은 과업에 따라 무게가 달라진다
다섯 기준은 거의 모든 과업에 적용되지만, 항상 똑같이 중요하지는 않다. 어떤 작업에서는 정확성이 가장 무겁고, 어떤 작업에서는 형식 준수가 성패를 가른다.
예를 들어 고객지원 정책 안내는 정확성과 톤 적합성이 특히 중요하다. 잘못된 정보는 바로 문제를 만든다. 반면 데이터 라벨링이나 분류 결과 정리에서는 형식 준수와 정확성이 더 중요할 수 있다. 임원 보고용 한 페이지 요약은 완성도와 실무 사용 가능성의 비중이 높다. 필요한 의사결정 포인트가 빠지면 보고서가 역할을 못 하기 때문이다.
즉, 기준은 공통이지만 우선순위는 다르다. 중급 사용자는 이 우선순위를 과업별로 조정할 수 있어야 한다. 그래야 "무엇이 가장 치명적인 실패인지"를 빠르게 판단할 수 있다.
좋은 결과의 기준을 프롬프트 안에 심는 법
좋은 평가 기준은 출력이 나온 뒤에만 쓰는 것이 아니다. 애초에 프롬프트 안에 넣어 두면 결과 품질이 더 안정된다. 모델이 무엇을 잘해야 하는지 미리 알게 되기 때문이다.
예를 들어 단순히 "회의록을 정리해 줘"라고 말하는 대신, "사실에 없는 내용은 추가하지 말고, 결정사항·미해결 이슈·다음 액션을 빠짐없이 포함하며, 표 형식으로 정리하고, 내부 공유용으로 간결한 톤으로 작성하라"라고 쓰면 다섯 기준 중 여러 항목이 이미 내장된다.
이렇게 보면 평가 기준은 사후 검사용 체크리스트이면서 동시에 사전 설계 도구이기도 하다. 좋은 프롬프트는 모델에게 일을 시키는 문장인 동시에, 좋은 결과의 정의를 적어 둔 계약서에 가깝다.
실전 예시: 같은 작업, 다른 결과
다음과 같은 과업을 생각해 보자.
"고객 인터뷰 5건을 바탕으로 공통 불만 3개와 개선 아이디어 3개를 정리해 달라. 팀 회의에 바로 공유할 수 있게 써 달라."
결과 A는 문장이 매끄럽고 읽기 좋다. 하지만 인터뷰에 없던 추정을 섞어 썼다. 이 경우 톤은 괜찮을 수 있어도 정확성이 낮다.
결과 B는 인터뷰 내용을 충실히 옮겼다. 하지만 공통 불만만 있고 개선 아이디어가 없다. 정확성은 높지만 완성도가 낮다.
결과 C는 내용도 충실하고 필요한 항목도 다 있다. 그러나 장문의 에세이처럼 써서 회의 중 빠르게 보기 어렵다. 정확성과 완성도는 높아도 실무 사용 가능성이 낮다.
결과 D는 불만 3개, 개선 아이디어 3개를 표로 정리하고, 각 항목에 근거 인터뷰를 표시했다. 문체도 팀 공유용으로 간결하다. 이런 결과가 다섯 기준을 고르게 만족하는 출력에 가깝다.
중요한 점은 "어느 답이 더 마음에 드는가"가 아니라, "어느 기준에서 무엇이 충족되었는가"로 말할 수 있어야 한다는 것이다.
장면별로 떠올리면 기준이 더 잘 보인다
이 다섯 기준은 추상적인 단어처럼 보이지만, 실제 업무 장면에 대입하면 금방 감이 잡힌다.
마케터는 광고 문안이 브랜드 톤에 맞는지, 채널 길이 제한을 지켰는지, 캠페인 메시지가 빠지지 않았는지를 본다. 교육 담당자는 설명이 학습자 수준에 맞는지, 예시와 연습 문제가 충분한지, 오개념을 만들 표현은 없는지를 본다. 고객지원 담당자는 정책과 맞는지, 공감 표현이 적절한지, 실제 발송 가능한 형식인지 살핀다. 기획자는 의사결정에 필요한 비교 기준이 들어갔는지, 결론과 근거가 분리되어 있는지, 보고서 양식에 맞는지 확인한다.
결국 좋은 결과의 기준은 업종마다 완전히 새로 만드는 것이 아니라, 같은 다섯 축을 자기 업무 언어로 번역하는 일에 가깝다.
최소 기준선부터 정하자
현실에서는 모든 결과가 완벽할 필요는 없다. 중요한 것은 먼저 통과선을 정하는 것이다. 어떤 항목은 반드시 충족해야 하고, 어떤 항목은 있으면 더 좋은 수준일 수 있다.
예를 들어 고객 공지문이라면 정확성과 톤 적합성은 최소 기준선 아래로 내려가면 안 된다. 데이터 정리용 출력이라면 형식 준수가 최소 기준선일 수 있다. 의사결정 요약이라면 실무 사용 가능성이 핵심 기준선이 된다.
이 최소 기준선을 정해 두면 평가가 훨씬 빨라진다. "완벽하진 않지만 써도 되는가?"라는 실무 질문에 답할 수 있기 때문이다. 또한 어떤 문제는 즉시 수정해야 하고, 어떤 문제는 다음 버전에서 개선해도 되는지도 구분할 수 있다.
감으로 고치기에서 기준으로 고치기로
중급 프롬프트 설계의 전환점은 여기 있다. 예전에는 결과를 보고 "좀 애매하네"라고 느꼈다면, 이제는 "정확성은 괜찮지만 완성도가 낮고, 형식 준수 실패로 후속 작업이 어렵다"라고 말할 수 있어야 한다.
이렇게 평가 언어가 생기면 프롬프트 개선도 정밀해진다. 정확성이 낮다면 근거 범위를 제한하거나 불확실성 표시를 강화하면 된다. 완성도가 낮다면 필수 항목 목록을 명시하면 된다. 형식 준수가 약하다면 출력 스키마를 더 분명히 적으면 된다. 톤이 맞지 않으면 대상 독자와 문체 예시를 보완하면 된다. 실무 사용 가능성이 떨어지면 다음 단계에서 실제로 필요한 필드와 결정을 다시 정의해야 한다.
즉, 좋은 결과의 기준은 평가표이면서 동시에 개선 지도다.
이 장의 핵심 정리
좋은 프롬프트는 좋은 문장을 만드는 기술이 아니라, 좋은 결과를 반복해서 얻는 설계다. 그리고 좋은 결과는 다섯 기준으로 볼 수 있다.
정확성: 틀리거나 지어낸 내용이 없는가
완성도: 필요한 요소가 빠짐없이 들어 있는가
형식 준수: 요청한 구조와 포맷을 지켰는가
톤 적합성: 독자와 상황에 맞는 말투인가
실무 사용 가능성: 바로 다음 작업에 투입할 수 있는가
이 다섯 기준을 갖고 보면, 출력은 더 이상 막연한 인상으로 평가되지 않는다. 어디가 부족한지, 무엇을 고쳐야 하는지, 어떤 프롬프트가 더 좋은지 분명하게 비교할 수 있다. 바로 이 기준 감각이 있어야 다음 단계인 루브릭 설계와 프롬프트 비교도 가능해진다.
결국 중급의 핵심은 멋진 답을 뽑는 것이 아니다. 팀과 함께 같은 기준으로 좋은 답을 알아보는 것, 그리고 그 기준에 맞게 더 나은 프롬프트를 만들어 가는 것이다.
이 노트는 보도·비평·교육·연구 목적으로 작성되었습니다. 저작권 문의가 있으시면 에서 알려주세요.