37차시. 루브릭 설계
2. 루브릭의 구조
출처: 원본 PDF 37차시_루브릭설계.pdf 5쪽 · 쪽 그림 5쪽
루브릭은 항목 × 수준의 표입니다. 각 칸에 구체적인 기준을 씁니다.
│ 0점(미흡) │ 1점(보통) │ 2점(우수)
──────────┼─────────────┼─────────────┼──────
───────
정확성 │ 기준 A │ 기준 B │ 기준 C
──────────┼─────────────┼─────────────┼──────
───────
근거성 │ 기준 D │ 기준 E │ 기준 F
──────────┼─────────────┼─────────────┼──────
───────
완결성 │ 기준 G │ 기준 H │ 기준 I2-1) RAG 답변 평가 루브릭 (예시)
| 항목 | 0점 — 미흡 | 1점 — 보통 | 2점 — 우수 |
|---|---|---|---|
| 정확성 / (35%) | 사실이 틀림 / 숫자·조건 오류 | 핵심은 맞으나 일부 부정확 | 모든 사실이 정확 |
| 근거성 / (30%) | 근거 밖 내용 포함 / 출처 없음 | 근거 안이나 인용 표시미흡 | 모두 근거 기반 / 출처 명시 |
| 완결성 / (20%) | 질문의 절반 이하만답함 | 주요 부분은 답했으나일부 누락 | 질문의 모든 부분에 답함 |
| 명료성 / (15%) | 장황하거나 이해 어려움 | 읽을 만하나 다소 늘어짐 | 간결하고 이해하기 쉬움 |
💡 앞 예시를 이 루브릭으로 채점하면
답변 A — 정확 2 · 근거 2 · 완결 2 · 명료 2 = 2.00점
답변 B — 정확 2 · 근거 0 · 완결 1 · 명료 1 = 1.15점
답변 C — 정확 1 · 근거 0 · 완결 2 · 명료 0 = 0.75점
(계산: 각 항목 점수 × 가중치의 합)
이제 A > B > C를 숫자로 말할 수 있습니다.