AI에게 긴 요청을 한 번에 맡기면 어떤 입력이 결과를 바꿨는지, 어디에서 오류가 생겼는지 구분하기 어렵습니다. 이 튜토리얼에서는 위험이 낮은 텍스트 작업 하나를 골라 입력과 완료 조건을 먼저 적고, AI가 만든 결과를 사람이 직접 검증합니다. 검증에 실패하면 조건 하나만 바꿔 다시 실행합니다.
작업 고르기
먼저 20분 안에 끝낼 수 있고 결과를 눈으로 확인할 수 있는 작업을 고릅니다. 예를 들어 회의 메모에서 결정 사항만 추리거나, 긴 문서를 세 개의 질문으로 바꾸는 작업이 적당합니다. 실제 고객 데이터나 공개 전 문서처럼 보호가 필요한 정보는 연습 입력에서 제외하세요.
이번 연습에서는 다음 예시를 사용합니다.
입력: 짧은 회의 메모
원하는 결과: 결정 사항과 아직 정하지 못한 항목을 분리한 목록
완료 조건 쓰기
프롬프트를 쓰기 전에 결과가 완료되었다고 판단할 조건을 적습니다. 표현의 멋짐보다 관찰할 수 있는 조건이 유용합니다.
- 결정 사항과 미결 항목을 서로 다른 제목 아래에 둔다.
- 입력에 없는 담당자나 날짜를 추가하지 않는다.
- 근거가 모호한 항목에는 확인 필요라고 표시한다.
이 세 문장은 AI에게 줄 지시이면서, 출력 뒤에 사람이 사용할 점검표이기도 합니다.
목표: 결정 사항과 미결 항목을 분리한다
입력: <회의 메모>
제약: 입력에 없는 이름이나 날짜를 추가하지 않는다
확인: 각 항목의 근거를 원문에서 찾는다작은 루프 실행하기
입력과 완료 조건, AI 실행, 사람의 검증을 한 묶음으로 실행합니다. 아래 다이어그램은 각 요소가 나타나는 순서대로 재생할 수 있습니다. 재생 결과는 개념을 설명하기 위한 것이며 특정 도구의 자동화된 정확성을 뜻하지 않습니다.
- 입력과 완료 조건: 원문을 그대로 붙이고, 원하는 결과와 지켜야 할 조건을 함께 적습니다.
- AI 실행: 한 번에 하나의 결과 형식만 요청합니다.
- 사람의 검증: 결과의 각 항목을 원문과 완료 조건에 대조합니다.
검토 단계에서 모든 완료 조건을 확인하면 한 번의 루프가 끝납니다.
결과 검토하기
AI의 문장이 자연스러운지보다 각 항목이 입력으로 돌아가 확인되는지를 먼저 봅니다. 원문에서 근거 문장을 찾을 수 없는 항목은 삭제하거나 확인 필요로 돌립니다. 날짜, 수치, 이름은 원문과 한 글자씩 대조하고, 해석이 필요한 판단은 사람이 최종 결정합니다.
완료 조건 가운데 하나라도 확인할 수 없다면 입력이나 완료 조건 중 하나를 바꿔 다시 실행합니다. 요청을 길게 덧붙여야 한다면 먼저 작업을 더 작은 단계로 나눕니다. 예를 들어 결정 사항 추출과 미결 항목 추출을 두 번의 요청으로 분리할 수 있습니다.
좋은 결과는 자연스럽게 읽히는 결과가 아니라, 입력과 완료 조건으로 다시 확인할 수 있는 결과입니다.
이 튜토리얼의 검토 원칙