morsoli / blog-comment

博客评论
0 stars 0 forks source link

一种基于滑动窗口的RAG优化实现方案探索 - 莫尔索 #90

Open morsoli opened 11 months ago

morsoli commented 11 months ago

https://liduos.com/rag-optimisation-implementation-scheme.html

RAG(检索增强生成)是一种结合了检索(通常是知识库或数据库)和生成模型(大语言模型)的技术,目的是在生成文本的时候能够参考相关的外部知识。这样,即使生成模型在训练时没有看到某些信息,它也能在生成时通过检索到的知识来生成更加准确和丰富的回答,这篇文章实现一种基于动态上下文窗口的方案,能够处理大规模文档,保留重要的上下文信息,提升检索效率,同时保持灵活性和可配置性。