먼저 큰 그림부터

수업 자료는 오늘 내용을 요리에 빗댑니다. 아무리 훌륭한 셰프라도 썩은 재료로는 좋은 요리를 만들 수 없습니다. RAG도 같습니다. 아무리 좋은 GPT를 써도 읽어 들인 글자가 깨져 있으면 좋은 답이 나오지 않습니다. 그래서 RAG 5단계의 맨 앞, 문서를 읽는 단계(Ingestion)부터 시간을 들여 봅니다.

오늘 챙겨 가실 것은 세 가지입니다. 첫째, 어떤 형식을 읽든 결과는 page_content와 metadata 두 칸짜리 Document 목록이라는 점. 둘째, TXT는 파일 하나에 Document 하나, PDF는 쪽마다 하나라는 점. 셋째, 읽은 다음에는 반드시 눈으로 확인하는 습관입니다. 다음 7차시에서는 오늘 읽은 긴 Document를 검색하기 좋은 크기로 자릅니다.