12차시. RAG 품질 문제
4. 증상 → 원인 진단표
출처: 원본 PDF 12차시_RAG디버깅.pdf 8쪽 · 쪽 그림 8쪽
답이 이상할 때 이 표를 위에서부터 확인해 나가세요.
| 증상 | 의심 단계 | 처방 (배우는 차시) |
|---|---|---|
| 문서에 있는데 "없다"고 답함 | Retrieval | k 상향 · 질의 재작성 (11 · 30차시) |
| 답이 중간에 끊긴 느낌 | Chunking | chunk_size · overlap 조정 (7차시) |
| 조건·예외가 빠짐 | Chunking / k | overlap 증가, k 상향 (7 · 11차시) |
| 엉뚱한 주제로 답함 | Retrieval | MMR · filter 적용 (11차시) |
| 근거에 없는 내용을 말함 | Generation | 프롬프트 제약 강화 (13차시) |
| 출처를 못 밝힘 | 프롬프트 설계 | 출처 표기 지시 추가 (13차시) |
| 답이 장황하고 흐림 | Retrieval | k 하향 · 재순위 (11 · 33차시) |
| 매번 답이 달라짐 | Generation | temperature=0 확인 (5차시) |
| 표·숫자가 뒤죽박죽 | Ingestion | 로딩 방식 재검토 (6차시) |
💡 표를 쓰는 순서
1단계 — 검색 결과를 출력해서 눈으로 봅니다
2단계 — 정답 조각이 있는지 확인합니다
3단계 — 위 표에서 증상을 찾습니다
4단계 — 해당 차시의 처방을 하나만 적용합니다
5단계 — 다시 측정해서 나아졌는지 봅니다
⚠ 한 번에 여러 개를 고치지 마세요.
무엇 때문에 좋아졌는지 알 수 없게 됩니다.