종합퀴즈

Q1이 과정에서 RAG가 하는 일은 무엇인가?

Q2환각에 가장 가까운 설명은?

Q3검색이 틀렸을 때의 증상은?

Q4이 교안에서 LLM을 한 문장으로 말하면?

Q5RAG가 하지 않는 일은?

Q6프롬프트가 넓고 형식 지정이 없을 때 생기기 쉬운 결과는?

Q7문서가 바뀔 때만 다시 하는 단계는?

Q8키워드 검색과 벡터 검색의 차이는?

Q9조각을 너무 잘게 자르면?

Q10API 키를 두는 위치는?

Q11예제를 차시 폴더에서 실행하는 이유는?

Q12이 차시 test.py가 확인하는 것은?

Q13Document에서 본문이 들어 있는 속성은?

Q14overlap이 없으면 생기기 쉬운 일은?

Q15PromptTemplate의 빈 칸은 언제 채워지나?

Q16TXT 하나와 PDF의 Document 개수가 다른 이유는?

Q17스캔본 PDF에서 흔한 문제는?

Q18출처를 답에 쓰려면 필요한 것은?

Q19분할의 기준으로 이 교안이 강조하는 것은?

Q20평균 길이가 chunk_size보다 짧은 이유는?

Q21overlap의 역할은?

Q22인덱스를 만드는 시점은?

Q23프롬프트에 반드시 넣을 두 줄에 해당하는 것은?

Q24검색 결과 없이 답을 쓰면?

Q25임베딩에 대한 설명으로 맞는 것은?

Q26코사인 유사도는 무엇을 보나?

Q27임베딩 모델을 바꾸면?

Q28FAISS를 쓰는 이유로 이 교안이 말하는 것은?

Q29저장 시 생기는 두 파일은?

Q30with_score 점수를 유사도로 잘못 읽으면?

Q31Retriever를 두는 이유는?

Q32정답 조각이 이미 1–3위인데 답이 틀리면?

Q33build_context가 조각 앞에 번호를 붙이는 이유는?

Q34검색된 조각 안에 정답이 있을 때의 진단은?

Q35근거는 있는데 없는 사실을 붙이면?

Q36diagnose.py가 넣는 질문 유형이 아닌 것은?

Q37이 과정 프롬프트의 순서는?

Q38V2와 V3의 차이는?

Q39프롬프트로 고칠 수 없는 실패는?

Q40실험에서 한 번에 바꾸는 값의 개수는?

Q41비교 순서로 교안이 든 예는?

Q42k를 계속 키우거나 임계값을 계속 낮추면?

Q43설정을 바꿀 때 여는 파일은?

Q44ask가 밖으로 돌려주는 것은?

Q45콘솔을 Streamlit으로 바꿔도 rag.py를 그대로 쓰는 이유는?

Q461부를 세 덩어리로 나누면 9–14차시는?

Q47앞의 세 칸(수집, 분할, 임베딩)을 다시 하는 때는?

Q48이상한 답을 가를 때 던지는 질문은?

Q49그래프에서 노드와 엣지는?

Q50만드는 순서는?

Q51조건부 분기는 무엇인가?

Q52노드가 return하지 않은 키는?

Q53log에 operator.add reducer가 필요한 이유는?

Q54question과 query를 나누는 이유는?

Q55좋은 노드의 조건이 아닌 것은?

Q56fallback이 하는 일은?

Q57검색과 생성을 한 함수에 두면?

Q58조건부 Edge의 분기 함수는?

Q59재시도 루프에서 상한 검사를 다른 조건보다 아래에 두면?

Q60일반 Edge는?

Q61가짜 노드로 먼저 철골을 세우는 이유는?

Q62invoke와 stream의 차이는?

Q63재귀 한도 초과가 나면 먼저 볼 곳은?

Q6422차시 이식이 성공했다는 기준은?

Q65app.py를 거의 안 고쳐도 되는 이유는?

Q66정상 질문의 경로는?

Q6722차시 그래프가 하지 않는 일은?

Q68판정과 이동을 나누는 이유는?

Q69Modular RAG의 핵심 세 모듈은?

Q7024차시 검색 노드가 하지 않는 일은?

Q71low_score와 결과가 아예 없을 때 처방이 다른 이유는?

Q72실패 이유로 교안이 나누는 예가 아닌 것은?

Q73근거 문서가 없을 때 생성 노드가 하는 일은?

Q74형식 검사와 내용 검사를 나누면?

Q75재시도 틀을 PROMPTS에 넣으면 안 되는 이유는?

Q76인용 번호가 있어도 내용이 틀릴 수 있는 예는?

Q77Verifier가 답을 직접 고치지 않는 이유는?

Q782단 검사인 이유는?

Q79안전한 루프의 세 요소는?

Q80bump 노드가 따로 있는 이유는?

Q81같은 근거로 다시 써도 안 되는 실패는?

Q82분기 함수의 네 규칙에 없는 것은?

Q83애매하면 기본 경로를 document로 두는 이유는?

Q84결정성이 디버깅에 필요한 이유는?

Q85규칙으로 공짜로 가르는 대상은?

Q86분류에 실패했을 때 document인 이유는?

Q87재검색 후보로 두는 fail_reason은?

Q88어휘 불일치의 예로 맞는 것은?

Q89question을 유지하는 이유는?

Q90retries와 rewrites를 나누는 이유는?

Q91예외가 그래프 밖으로 나가면?

Q92모든 예외를 삼키기만 하면?

Q93안내 문장을 이유별로 나누는 이유는?

Q9432차시 그래프에서 문서 검색으로 가는 질문은?

Q9522차시 이식에 대한 설명으로 맞는 것은?

Q96이 그래프가 약하다고 교안이 말하는 것이 아닌 것은?

Q9730개 질문의 프로파일 결과를 보고 최적화 대상에서 가장 먼저 빼야 할 것은 무엇일까요?

Q98임베딩 사전 검증에서 답변과 근거의 유사도가 0.6으로 나왔습니다. 수업 자료의 예시 기준으로는 어떻게 처리할까요?

Q99캐싱에 대한 설명으로 맞는 것은 무엇일까요?

Q100k=5로 검색해 가져온 조각 5개 중 관련 있는 것이 3개이고, 문서 전체에 관련 조각이 4개 있습니다. Recall@5는 무엇일까요?

Q101질문 세 개에서 정답 조각이 각각 1위, 2위, 없음으로 나왔습니다. MRR은 무엇일까요?

Q102LLM 심판의 편향과 완화 방법이 바르게 짝지어진 것은 무엇일까요?

Q103평가 데이터셋에 부재 질문(문서에 답이 없는 질문)을 꼭 넣는 까닭은 무엇일까요?

Q104평가를 돌려 85%가 나왔고, 틀린 질문 5개를 보고 프롬프트를 고친 뒤 다시 돌렸더니 95%가 됐습니다. 가장 알맞은 해석은 무엇일까요?

Q105데이터셋 v1(50문항)에서 90%, 어려운 질문 20개를 더한 v2(70문항)에서 85%가 나왔습니다. 올바른 대응은 무엇일까요?

Q106Hit Rate@5 는 90%인데 MRR 이 0.4 로 나왔습니다. 이 결과가 뜻하는 것은 무엇일까요?

Q107답변을 채점하는 심판 LLM 으로 생성에 쓴 모델과 다른 모델(EVAL_MODEL)을 쓰는 까닭은 무엇일까요?

Q108트레이드오프 실험에서 "검증 제거" 설정의 결과로 알맞은 것은 무엇일까요?

Q109루브릭의 수준 기술로 가장 알맞은 것은 무엇일까요?

Q110가중 평균 외에 Gate 조건(예: 정확성 ≥ 1점)을 따로 두는 까닭은 무엇일까요?

Q111두 채점자가 같은 답변 다섯 개를 채점했더니 평균 차이가 0.35 였습니다. 어떻게 해야 할까요?

Q112수업 자료가 든 "좋은 주제의 5가지 조건"에 들어가지 않는 것은 무엇일까요?

Q113새 문서로 바꾸면서 INDEX_PATH 를 고치지 않으면 어떤 일이 생길까요?

Q114수업 자료가 요구사항 정의서에서 가장 중요하다고 한 칸은 무엇일까요?

Q1154-1절 개선 후보 가운데 수업 자료가 "오늘은 하지 마세요"라고 한 것은 무엇일까요?

Q116Hit Rate 는 높은데 Correctness 가 낮다면 어디를 먼저 봐야 할까요?

Q117MMR 과 k=7 을 적용한 뒤 Faithfulness 가 0.941 에서 0.928 로 떨어진 까닭으로 수업 자료가 든 것은 무엇일까요?

Q118Holdout 점수가 Dev 점수보다 낮게 나왔을 때 어떻게 받아들여야 할까요?

Q119시연 질문 두 개 가운데 부재 질문이 더 중요한 까닭은 무엇일까요?

Q120수업 자료가 꼽은 "발표에서 가장 많이 하는 실수"가 아닌 것은 무엇일까요?