LESSON 06
정정표 — 틀린 답을 고치는 흐름
방장이 확정한 답을 가장 앞에 두기
오늘의 목표
원본 자료를 건드리지 않고 틀린 답을 덮어쓰는 정정표를 만들고, 틀린 답이 나왔을 때 원인을 찾아 고치는 순서를 익힙니다.
예상 소요 시간 약 40분
정정표가 필요한 이유
자료가 틀렸거나 임시 문구일 때가 있어요. 원본을 고치기 곤란하면 정정표에 항목을 써요. 방장이 확정한 답이 언제나 가장 먼저 쓰이게 하는 장치예요.
항목 하나는 이렇게 생겼어요.
| 칸 | 뜻 |
|---|---|
| 정답 | 한두 문장. 우선 조각으로 올라가요 |
| 치환 | 옛 문구 → 새 문구. 다른 조각에 남은 옛 문구를 바꿔요 |
| 키워드 | 이 단어가 질문에 있으면 정정 조각의 점수를 높여요 |
사실을 단정하는 문장은 정답 칸 한 곳에만 둬요. 나중에 바뀌면 그 줄만 고치면 돼요.
따라하기 1: 정정표 형식 만들기
chatbot-knowledge/corrections.md를 만들고 빌드가 읽도록 해줘. 항목은## 정정 N: 제목아래에정답:,치환:,키워드:줄로 써. 빌드 때 정답은 지식 팩 맨 앞 조각으로 넣고 검색 점수를 3배로 올려. 치환은 모든 조각에 적용하고,--check에서 치환이 실제로 몇 번 일어났는지와 옛 문구가 남지 않았는지 검사해줘. 예시 항목은 가짜 내용(예: 가상의 프로그램 가격)으로 하나만 넣어줘.
틀린 답을 고치는 흐름
- 캡처를 받아요. 서버에는 질문 원문을 남기지 않으니 방 화면에서 확보해요.
- 원인을 찾아요. 지식 팩 검색으로 관련 조각을 봐요. 원본이 틀렸나, 조각이 없어서 지어냈나, 모델이 어긋나게 말했나.
- 고칠 곳을 골라요. 원본 수정 / 정정표 항목 / 프롬프트 규칙.
- 재빌드 → 검사 → 배포.
- 표현을 바꿔서 같은 뜻으로 다시 물어봐요. 같은 질문은 저장된 옛 답이 나올 수 있어요.
방에서 받은 틀린 답 캡처의 질문과 답을 아래에 붙일게. 지식 팩에서 관련 조각을 찾아 원인이 (a) 원본이 틀림 (b) 조각 부재 (c) 모델이 어긋나게 말함 중 무엇인지 말해줘. 고칠 방법 후보를 정정표 항목 초안으로 보여주되, 파일은 내가 고르기 전에는 수정하지 마.
정정은 쌓이면 관리가 필요해요
- 정정이 늘수록 서로 충돌하기 쉬워요. 키워드는 일반어 단독(예: "가격")을 피하고 주제어로 써요.
- 항목마다 근거(누가 언제 확정했는지)를 한 줄 남겨요. 나중에 왜 이렇게 고쳤는지 알 수 있어요.
🧪 실습
- 정정표에 가짜 항목 하나를 만들고
--check로 치환이 반영된 것을 확인했다 - 항목 추가 전과 후에 같은 질문의 답이 바뀌는 것을 시험 방에서 보았다
- 일부러 틀리게 쓴 문장 하나를 정답·치환·키워드로 고쳐 보았다
- 바꾼 표현으로 다시 물어 캐시가 아닌 새 답이 나오는지 확인했다
오늘의 체크리스트
- 정정표의 세 칸과 점수가 올라가는 방식을 설명할 수 있다
- 틀린 답의 원인 세 가지를 구분할 수 있다
- 정정마다 근거를 남겼다