以下是关于学习 RAG 的方法和相关内容:
还不知道 Coze 是什么的同学可以看公开分享:胎教级教程:万字长文手把手教你用 Coze 打造企业级知识库 。
关于新知识的学习,每个人都有自己的方法,这里我推荐我的一个方法,那就是Claude+CozeClaude大家都很清楚了,目前最强的AI大模型,一个月20美元,好用到飞起。而Coze呢则是一款AI Agent的衍生产品,对我来说他现在最大的价值就是两点依靠Coze来跟进当前AI Agent工具的发展情况,对其保持关注,发现商业化的机会做产品Demo,我有任何的想法都可以考虑在Coze中实现一个Demo还不知道Coze是什么的同学可以看我的公开分享:[胎教级教程:万字长文手把手教你用Coze打造企业级知识库](https://axsppz4oyvj.feishu.cn/wiki/ZP1wwFWhvii1sfkvcEFc2saznoh)我在学习RAG的过程首先会通过Claude帮助我了解细节的概念,然后再通过Coze搭建一个Dmeo,在动手实践中学习RAG在学习RAG的过程中,我一共创建了4个Bot:产品资料问答机器人这个Bot是利用了Coze的知识库能力,演示知识库在企业中的应用。相关资料请参考我的公开分享:[胎教级教程:万字长文手把手教你用Coze打造企业级知识库](https://axsppz4oyvj.feishu.cn/wiki/ZP1wwFWhvii1sfkvcEFc2saznoh)Query改写助手学习Bot:这里为了学习Query的改写,我专门做了一个Bot机器人进行学习Bot地址:https://www.coze.cn/store/bot/7400077517299957800?panel=1&bid=6dkpl06gg601j
视频演示:[20240831233346_rec_.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/JdVJb2UpCohFVkxEUxzcSLYbn6d?allow_redirect=1)Query改写效果对比Bot这个Bot用来对比Query改写和未改写的区别。使用之前秘塔搜索的案例,通过对Query进行改写和非改写,对比搜索结果来理解Query改写的优势Bot地址:https://www.coze.cn/store/bot/7400553639514800182?panel=1&bid=6dkplh1r43g15视频演示:[20240831234101_rec_.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/T2d3bP5T0oTEvSx7jfocql9Xnw0?allow_redirect=1)RAG全流程学习Bot这个Bot我花费了很长的时间,通过结合对RAG全流程的了解,使用Coze的工作流,主要是结合大模型,模拟了RAG的离线存储和在线检索全流程PS:这个流程还是一个玩具,因为对于向量化这块我直接使用了提示词和大模型,这是非常不严谨的,理论上应该直接介入Embedding模型的API,这个后面我会考虑,这里只是给大家展示思路我们直接看视频[20240925235024_rec_.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/Y8OcbANyto0UytxZha7c700XnWh?allow_redirect=1)
旁白:在学习RAG之初,你不知道如何切入,这时候你认识了一个叫做大圣的老师。他说,你可以从AI搜索切入,帮助你理解RAGRAG的流程相对复杂,为了让大家更好的理解RAG,我们先用大家比较熟悉的AI搜索来引出RAG。AI大模型最擅长的是语义理解和文本总结,最不擅长的就是获取实时的信息。搜索引擎最擅长的就是获取实时的信息,但是缺点就是信息太分散了,每次都需要人为进行总结。AI+搜索引擎的结合,就是我们上面讲到的,给AI配备了一个活字典,让AI可以随时进行查阅。下图是一个简化版本的AI搜索工作原理,其中搜索引擎在这里就充当着知识库的角色。下面则是我用Coze制作的一个秘塔搜索机器人,感兴趣可以看下他的工作过程[20240828234529_rec_.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/QsLabWiPzoXN6GxVqpmc4Z9Vntb?allow_redirect=1)OK,关于AI搜索我们就简单介绍到这里,下面我们正式开始介绍RAG