RAG2026-5일37차시 · 루브릭 설계5 / 18← 이전목차다음 →MetaContents

37차시. 루브릭 설계

2. 루브릭의 구조

출처: 원본 PDF 37차시_루브릭설계.pdf 5쪽 · 쪽 그림 5쪽

루브릭은 항목 × 수준의 표입니다. 각 칸에 구체적인 기준을 씁니다.

출력
          │  0점(미흡)  │  1점(보통)  │  2점(우수)
──────────┼─────────────┼─────────────┼──────
───────
 정확성    │   기준 A    │   기준 B    │   기준 C
──────────┼─────────────┼─────────────┼──────
───────
 근거성    │   기준 D    │   기준 E    │   기준 F
──────────┼─────────────┼─────────────┼──────
───────
 완결성    │   기준 G    │   기준 H    │   기준 I

2-1) RAG 답변 평가 루브릭 (예시)

항목0점 — 미흡1점 — 보통2점 — 우수
정확성 / (35%)사실이 틀림 / 숫자·조건 오류핵심은 맞으나 일부 부정확모든 사실이 정확
근거성 / (30%)근거 밖 내용 포함 / 출처 없음근거 안이나 인용 표시미흡모두 근거 기반 / 출처 명시
완결성 / (20%)질문의 절반 이하만답함주요 부분은 답했으나일부 누락질문의 모든 부분에 답함
명료성 / (15%)장황하거나 이해 어려움읽을 만하나 다소 늘어짐간결하고 이해하기 쉬움

💡 앞 예시를 이 루브릭으로 채점하면
답변 A — 정확 2 · 근거 2 · 완결 2 · 명료 2 = 2.00점
답변 B — 정확 2 · 근거 0 · 완결 1 · 명료 1 = 1.15점
답변 C — 정확 1 · 근거 0 · 완결 2 · 명료 0 = 0.75점
(계산: 각 항목 점수 × 가중치의 합)
이제 A > B > C를 숫자로 말할 수 있습니다.

← 이전 절37차시 · 1. 왜 이분법으로는 부족한가다음 절 →37차시 · 3. 좋은 루브릭의 조건