AI大模型:RAG实现流程-Post-Retrieval

文摘   科技   2024-08-09 07:00   广东  
我建了一个AI交流群,由于群已超200人,请在公众号回复“AI工具”,加群主VX,再入群,谢谢!

 直接检索整个文档chunk并将它们直接输入到LLM的上下文环境中并非最佳选择。后处理文档可以帮助LLM更好地利用上下文信息。

想象一下,老太太们在聊天时,如果有人提到了过去的事情,她们会回忆起之前说过的话,然后继续聊天。这个过程就像是“RAG”(Retrieval-Augmented Generation,检索增强生成)实现流程中的“Post-Retrieval”(检索后处理)。

会话历史:就像老太太们聊天时记得之前说过的话,RAG在处理信息时也会记住之前的对话内容,这样可以帮助它更好地理解现在的话题和需要回答的问题。

过滤:就像老太太们在聊天时可能会忽略一些不重要的话题,RAG在处理信息时也会过滤掉一些不相关的信息,只留下对回答问题有帮助的内容。

重排序:就像老太太们在聊天时可能会根据重要性重新安排话题的顺序,RAG在处理信息后,也会根据信息的相关性和重要性重新排序,确保最重要的信息被优先考虑。



推荐阅读

🔥10W+ 教师必备的九个AI工具,很难相信还是免费!

🔥AI Agent调研--7种Agent框架对比!盘点国内一站式Agent搭建平台,一文说清差别!大家都在用Agent做什么?

🔥我不忍心您再这么辛苦了!教师必备的4个最全爆火的的AI知识库,看完您也能成为AI提示词大神!

🔥别再只关注Kimi了!橙篇AI硬控风暴席卷,让人欲罢不能!适合创意内容生产者、科研学术领域从业者等的一站式创作需求。

🔥1W+一文搞懂大模型、RAG、函数调用、Agent、知识库、向量数据库、知识图谱、AGI的区别和联系!!...

🔥强烈推荐!2024年你应该知道的20款免费好用的AI工具!包含语言类、图像类、视频类

🔥Kimi AI 你到底还隐藏了多少好功能

🔥想让你的公众号拥有AI对话能力吗?那你一定不要错过这篇文章,手把手教你将Kimi大模型接入微信公众号,完全免费,只需要三分钟即可

🔥 华山论剑:文心一言、智谱清言、讯飞星火、通义千问、新华妙笔、 ChatGPT,公文写作哪家强?

🔥 华山论剑:腾讯、商汤、华为、百度、阿里巴巴五大平台,大模型在产品技术能力、战略愿景能力、生态开放能力三个维度的综合竞争力

🔥 4W+ 华山论剑:文心一言、通义千问、智谱AI、百川智能、天工AI、讯飞星火和Kimi七大平台,你怎么选?



    如果你觉得“军哥说AI”公众号或这篇文章对你有帮助,别忘了给我点赞、在看、转发分享给更多的朋友。有任何问题或者想法,欢迎在评论区留言和我一起讨论。




军哥说AI
专注AI应用定制开发15年,欢迎来喝茶洽谈合作! 信息系统项目管理师。 广州市科技入库专家!
 最新文章