프롬프트를 조금씩 다르게 쓰면 어떤 요청이 내 작업에 더 맞는지 비교할 수 있습니다. 다만 말투만 달라진 결과를 ‘성능이 좋아졌다’고 단정하면 곤란합니다. 이 글은 같은 입력 자료로 요청문을 바꿔 보고, 빠진 정보와 근거를 확인하는 연습 절차를 설명합니다. 아래는 실행 결과가 아닌 연습용 문장입니다.
비교할 작업과 원문을 먼저 고정하기
두 요청문의 차이를 보려면 먼저 같은 작업, 같은 원문, 같은 독자와 출력 조건을 사용합니다. 답변을 받는 시점·모델·대화 맥락까지 달라지면 어느 표현이 차이를 만들었는지 구분하기 어렵습니다. 따라서 하나의 요소를 바꾸고, 나머지는 가능한 한 유지해야 합니다. 한 번의 출력만으로 일반적인 우열을 결론 내리지 않습니다.
연습용 공지: “사내 교육 신청 마감은 10월 15일입니다. 준비물은 노트북입니다. 장소는 회의실 A입니다.” 이 문장은 비교 방법을 설명하기 위한 가상 자료이며 실제 행사 안내가 아닙니다.
요청 문구를 바꿀 때 무엇을 유지할까
두 요청 모두 이 공지를 처음 읽는 직원에게 신청 마감과 준비물만 알려주는 것이 목표라고 가정합니다. 아래의 두 문장은 같은 원문, 같은 독자, 같은 출력 길이를 사용하고 핵심 지시의 표현만 달리합니다.
연습용 요청 A: “다음 공지에서 신청 마감과 준비물을 한 문장으로 알려줘. 공지에 없는 정보는 쓰지 마. [연습용 공지 붙이기]”
연습용 요청 B: “다음 공지를 읽고 처음 신청하는 직원이 확인해야 할 신청 기한과 챙길 물품을 한 문장으로 정리해줘. 공지에 없는 정보는 쓰지 마. [연습용 공지 붙이기]”
B는 독자의 행동을 조금 더 드러내지만, A와 B 모두 날짜와 준비물을 정확하게 담으면 이 작업에는 충분할 수 있습니다. ‘B가 언제나 더 좋다’고 주장하려면 실제 결과와 사용 목적을 더 살펴야 합니다.
결과에서 확인할 항목
AI가 작성한 답변을 실제로 비교할 때는 ① 마감일 ‘10월 15일’과 준비물 ‘노트북’을 빠뜨리지 않았는지, ② 원문에 없는 신청 방법이나 장소 변경을 만들어 넣지 않았는지, ③ 한 문장이라는 조건을 지켰는지, ④ 처음 신청하는 직원이 이해할 표현인지 확인합니다. 장소 ‘회의실 A’는 이번 요청의 핵심 항목은 아니지만, 답변에 포함되더라도 원문과 일치하는지 봅니다.
예를 들어 ‘공지 확인 후 신청하세요’라는 문장이 읽기 쉬워도 마감일이 빠지면 목적을 달성하지 못합니다. 반대로 문장이 덜 매끄럽더라도 두 핵심 정보가 정확하다면 실제로 무엇을 다듬을지 판단할 근거가 생깁니다. 실제 AI 답변이나 비교 실험 결과를 여기서 제시하지는 않습니다.
표현 외의 조건까지 바뀌었다면
A에는 ‘한 문장’, B에는 ‘표’라고 지시하면 요청문의 표현과 출력 형식이 동시에 바뀝니다. 차이가 생겨도 어느 요소 때문인지 말하기 어렵습니다. 항목이 다른 두 요청을 비교해야 한다면 ‘표현만 바꾼 비교’가 아니라 ‘목적이나 형식이 다른 두 프롬프트의 선택’이라고 구분해 기록하세요.
비교 기록을 다음 수정에 연결하기
기록할 때는 ‘원문과 작업 목적 / 바꾼 한 문장 / 유지한 조건 / 확인할 항목 / 발견한 누락과 추측’을 나란히 적습니다. 누락이 보이면 직함이나 수식어를 덧붙이기 전에 그 항목을 요청문에 명시합니다. 여러 평가 항목을 만드는 자세한 방법은 답변 품질을 비교하는 기준 만들기를, 문제가 확인된 뒤 요청을 고치는 순서는 반복 개선을 위한 프롬프트 수정 방법을 참고할 수 있습니다.
정리
표현을 바꿔 비교할 때에는 같은 자료와 목표를 유지하고, 누락·원문 일치·출력 조건을 확인합니다. 표현의 효과를 한 번의 답변으로 단정하지 말고, 어떤 변경이 어떤 문제를 해결하려는지 기록해야 다음 수정에 사용할 수 있습니다.