RAG Engine 개발을 위한 참고자료들

[YeonwooSung]

1. Advanced Rag Techniques

link

• 기본적인 RAG 구조와 응용 RAG 구조에 대한 전반적인 내용을 설명
• HyDE, Reranking, Hybrid Search, Auto-merging retriever, Query Transformation 등 다양한 개념 소개 및 설명
• llama-index 등의 연관 예제들 목록을 소개

[YeonwooSung]

2. A Guide on 12 Tuning Strategies for Production-Ready RAG Applications

link

• RAG를 ingestion stage와 inference stage로 나누어 각 스테이지 별 응용 기술에 대해 리뷰
• ingestion stage에서는 chunking, embedding, data cleaning, indexing algorithm 등에 대해 소개
• inference stage에서는 Query Transformation이나 HyDE, Reranker 등에 대해서 소개

전반적인 컨셉 및 느낌은 1번과 비슷

[YeonwooSung]

3. 12 RAG Pain Points and Proposed Solutions

link

• RAG 엔진을 구축할 때 흔히 겪는 12가지 pain point 들과 그들에 대한 주된 해결책들을 제시
• failure point가 아닌 pain point라고 부르는 이유는 모든 항목들이 다 해결책이 제시된 문제들이기 때문

Pain point 항목들

· Pain Point 1: Missing Content · Pain Point 2: Missed the Top Ranked Documents · Pain Point 3: Not in Context — Consolidation Strategy Limitations · Pain Point 4: Not Extracted · Pain Point 5: Wrong Format · Pain Point 6: Incorrect Specificity · Pain Point 7: Incomplete · Pain Point 8: Data Ingestion Scalability · Pain Point 9: Structured Data QA · Pain Point 10: Data Extraction from Complex PDFs · Pain Point 11: Fallback Model(s) · Pain Point 12: LLM Security