Navigate to WaytoAGI Wiki →
Home/Question List/Question Detail

要用什麼搭建自己的知識庫

Answer

要搭建自己的知识库，可以考虑以下几种方式：

  1. 基于 GPT API 搭建：涉及给 GPT 输入定制化的知识，但 GPT-3.5 免费版一次交互的容量有限。为处理大量知识，OpenAI 提供了 embedding API 解决方案。embeddings 是浮点数字的向量，向量间距离衡量关联性，小距离表示高关联度。
  2. 利用飞书搭建：个人可搭建某一领域知识库，如 AI 知识库；企业可搭建产品资料知识库。两篇相关文档及配套直播分享可供参考：03｜利用飞书搭建自己的知识库 、04｜PARA 方法论，打造持续升级的知识管理体系 。传统知识库使用存在分类不合理导致难以查找、答案可能在文章某段落需重新阅读等痛点。
  3. 本地部署大模型搭建：利用大模型搭建知识库是 RAG 技术的应用。RAG 是在大模型训练数据截止后，通过检索外部数据并在生成步骤中传递给 LLM 来实现。RAG 应用包括文档加载、文本分割、存储（嵌入和向量数据存储到向量数据库）、检索、输出等 5 个过程。文本加载器用于将用户提供的文本加载到内存以便后续处理。
Content generated by AI large model, please carefully verify (powered by aily)

References

从零开始，用GPT打造个人知识库

要搭建基于GPT API的定制化知识库，涉及到给GPT输入（投喂）定制化的知识。但GPT-3.5,也就是当前免费版的ChatGPT一次交互（输入和输出）只支持最高4096个Token，约等于3000个单词或2300个汉字。这点容量对于绝大多数领域知识根本不够。为了使用GPT的语言能力来处理大量的领域知识，OpenAI提供了embedding API解决方案。参考OpenAI embedding documents。[heading2]理解embeddings[content]embeddings(直译为嵌入）是一个浮点数字的向量（列表）。两个向量之间的距离衡量它们的关联性。小距离表示高关联度，大距离表示低关联度。进一步解释：向量（列表）：向量是数学中表示大小和方向的一个量，通常用一串数字表示。在计算机科学和数据科学中，向量通常用列表（list）来表示。列表是一种数据结构，它包含一组有序的元素。例如，一个二维向量可以表示为[2,3]，这意味着沿着两个轴的分量分别为2和3。在这里，"list"是一种编程术语，意味着一系列有序的数据。向量之间的距离：向量之间的距离是一种度量两个向量相似性的方法。有多种方式可以计算两个向量之间的距离，最常见的是欧几里得距离。欧几里得距离计算方法是将两个向量的对应元素相减，然后取平方和，再开平方。例如，向量A=[1,2]和向量B=[4,6]之间的欧几里得距离为sqrt((4-1)^2+(6-2)^2)=5。较小距离意味着高相关性，因为向量间相似度高。在OpenAI词嵌入中，靠近向量的词语在语义上相似。例如，“猫”和“狗”距离近，它们都是宠物，与“汽车”距离远，相关性低。文档上给了创建embeddings的示例上面的命令访问embeddings API接口，将input语句，转化成下面这一串浮点数字。

这可能是讲 Coze 的知识库最通俗易懂的文章了

对于传统意义上的知识库，我相信大家都不陌生。比如上面提到的[通往AGI之路](https://waytoagi.feishu.cn/wiki/QPe5w5g7UisbEkkow8XcDmOpn8e)。再比如我使用的飞书搭建自己的通往超级个体之路的知识库，里面存放了我打造超级个体过程中的所有知识和分享知识库是我们个人或者企业的一些信息和知识的集合，一般有这么两类：个人搭建的某一领域知识库，比如AI知识库，里面存放了你日常收集了你日常整理的AI信息和知识企业搭建的产品资料知识库，里面存放了关于公司售卖的产品的详细资料这里多说一句，如果你想搭建自己的知识库，但是还没有行动，我建议你看下我的分享。两篇文档配套1个半小时的直播分享，让你轻松打造自己的知识管理体系[03｜利用飞书搭建自己的知识库](https://axsppz4oyvj.feishu.cn/wiki/Tq5bw5HTeiqyeFkjs4YcCm8gnGh)[04｜PARA方法论，打造持续升级的知识管理体系](https://axsppz4oyvj.feishu.cn/wiki/PQn5wJ6GMigwH1koj4jcnt4xn8q)我们日常对于传统知识库的使用很简单，当我们遇到问题时，我们可以通过知识库的目录找到对应的文章，通过阅读之前收集的信息或者写作的文章来为自己答疑解惑。但是这里面会有两个痛点随着知识库中信息的增多，如果分类不合理，我们很难再找到当初我们搜集的文章放在哪里问题的答案可能是一篇文章中的某一段落，但是我们每次都需要重新阅读这篇文章才能找到答案那AI时代来临后，是否可以改善这个痛点呢？

手把手教你本地部署大模型以及搭建个人知识库

因为利用大模型的能力搭建知识库本身就是一个RAG技术的应用。所以在进行本地知识库的搭建实操之前，我们需要先对RAG有一个大概的了解。以下内容会有些干，我会尽量用通俗易懂的描述进行讲解。我们都知道大模型的训练数据是有截止日期的，那当我们需要依靠不包含在大模型训练集中的数据时，我们该怎么做呢？实现这一点的主要方法就是通过检索增强生成RAG（Retrieval Augmented Generation）。在这个过程中，首先检索外部数据，然后在生成步骤中将这些数据传递给LLM。我们可以将一个RAG的应用抽象为下图的5个过程：文档加载（Document Loading）：从多种不同来源加载文档。LangChain提供了100多种不同的文档加载器，包括PDF在内的非结构化的数据、SQL在内的结构化的数据，以及Python、Java之类的代码等文本分割（Splitting）：文本分割器把Documents切分为指定大小的块，我把它们称为“文档块”或者“文档片”存储（Storage）：存储涉及到两个环节，分别是：将切分好的文档块进行嵌入（Embedding）转换成向量的形式将Embedding后的向量数据存储到向量数据库检索（Retrieval）：一旦数据进入向量数据库，我们仍然需要将数据检索出来，我们会通过某种检索算法找到与输入问题相似的嵌入片Output（输出）：把问题以及检索出来的嵌入片一起提交给LLM，LLM会通过问题和检索出来的提示一起来生成更加合理的答案[heading2]文本加载器（Document Loaders）[content]文本加载器就是将用户提供的文本加载到内存中，便于进行后续的处理

Others are asking
如何在我的飛書軟件上導入waytoagi的知識庫？
在飞书上导入 WaytoAGI 的知识库，您可以参考以下方法： 1. 您可以在 WaytoAGI 飞书知识库首页找到加入飞书群的链接（下图二维码仅作示意，请在找到最新二维码），然后点击加入，直接@机器人即可。 2. 您也可以在 WaytoAGI.com 的网站首页，直接输入您的问题，即可得到回答。 另外，关于创建知识库并上传文本内容，有以下方式和操作步骤： Notion 方式： 1. 在文本格式页签下，选择 Notion，然后单击下一步。 2. 单击授权。首次导入 Notion 数据和页面时，需要进行授权。 在弹出的页面完成登录，并选择要导入的页面。 选择要导入的数据，然后单击下一步。 3. 选择内容分段方式： 自动分段与清洗：系统会对上传的文件数据进行自动分段，并会按照系统默认的预处理规则处理数据。 自定义：手动设置分段规则和预处理规则。 分段标识符：选择符合实际所需的标识符。 分段最大长度：设置每个片段内的字符数上限。 文本预处理规则： 替换掉连续的空格、换行符和制表符。 删除所有 URL 和电子邮箱地址。 4. 单击下一步完成内容上传和分片。 自定义方式： 1. 在文本格式页签下，选择自定义，然后单击下一步。 2. 输入单元名称，然后单击确认。 3. 单击创建分段，然后在弹出的页面输入要上传的内容。每个分段最多可添加 2000 个字符。 4. 单击保存。
2024-10-18
comfyUI是什麼？
ComfyUI 是一个基于节点流程式的 stable diffusion AI 绘图工具 WebUI，您可以将其视为集成了 stable diffusion 功能的 substance designer。通过把 stable diffusion 的流程拆分成节点，实现了更精准的工作流定制和良好的可复现性。 其具有以下优势： 1. 对显存要求相对较低，启动速度快，出图速度快。 2. 具有更高的生成自由度。 3. 可以和 webui 共享环境和模型。 4. 可以搭建自己的工作流程，可以导出流程并分享给别人，报错时能清晰发现错误所在步骤。 5. 生成的图片拖进后会还原整个工作流程，模型也会选择好。 但也存在一些劣势： 1. 操作门槛高，需要有清晰的逻辑。 2. 生态没有 webui 多（常用的都有），不过也有一些针对 Comfyui 开发的有趣插件。 ComfyUI 是一个开源的图形用户界面，用于生成 AI 图像，主要基于 Stable Diffusion 等扩散模型。其工作原理包括： 1. Pixel Space（像素空间）：图的左边表示输入图像的像素空间，在 ComfyUI 中，对应于可能通过“图像输入”模块或直接从文本提示生成的随机噪声图像。生成过程结束时，系统会将处理后的潜在表示转换回像素空间，生成最终的图像。 2. Latent Space（潜在空间）：ComfyUI 中的许多操作都在潜在空间中进行，如 KSampler 节点就是在这个空间中执行采样过程。图像被映射到潜在空间后，扩散过程在这个空间中进行。在 ComfyUI 中，您可以通过节点调整对潜在空间的操作，如噪声添加、去噪步数等。 3. 扩散过程（Diffusion Process）：噪声的生成和逐步还原。扩散过程表示的是从噪声生成图像的过程。在 ComfyUI 中，这通常通过调度器（Schedulers）控制，典型的调度器有 Normal、Karras 等，它们会根据不同的采样策略逐步将噪声还原为图像。您可以通过 ComfyUI 中的“采样器”节点选择不同的调度器，来控制如何在潜在空间中处理噪声，以及如何逐步去噪回归到最终图像。时间步数在生成图像时，扩散模型会进行多个去噪步。 您可以从 github 上下载作者部署好环境和依赖的整合包，按照官方文档安装即可：https://github.com/comfyanonymous/ComfyUI 。 此外，开源项目作者 ailm 在 ComfyUI 上搭建了一个可以接入飞书的 AI 女友麦洛薇（mylover），实现了稳定人设，无限上下文，永久记忆，无缝联动 SD 绘图等功能，适合完全没有代码基础的小伙伴们复现并且按自己的想法修改。
2025-04-10
你可以做什麼
以下是我能为您做的事情： 1. 为低年级小学生提供 Genie 模型的科普：Genie 模型可以根据人们的操作改变虚拟世界里发生的事情，其创建过程复杂，是科学家们用智慧和耐心将不同技术和知识拼合而成。长大后，您也可能成为创造智能模型的科学家和工程师。 2. 展示作业相关：您可以使用“/show 命令”和唯一的 Job ID 将自己的作业移动到另一个服务器或频道，恢复丢失的作业，或刷新旧作业以制作新变体、升级或使用较新的参数和功能。 3. 提供使用 AI 做事的指南： 写东西：可草拟各种初稿，如博客文章、论文等。提高提示能获得更好写作效果，还能让 AI 改进文本、创建不同风格草稿、帮助完成任务等。 帮助完成任务：如写邮件、创建销售模板、提供商业计划下一步等。 解锁自己：AI 能提供让您保持动力的方式。
2025-01-24
我想做一篇工作總結，你推薦我用什麼AI?
以下是为您推荐的可用于工作总结的 AI 工具和方法： 1. GPT 系列： 可以总结各种文章（文章不超过 2 万字），您打开后直接全选复制全文，然后粘贴发送给 GPTs 即可。GPT4 能识别出重点内容。 对于有字幕的 B 站视频，可先通过油猴脚本（如）提取字幕，再将字文字内容全选复制发送给 GPTs 进行总结。 2. 会议总结类工具： 3. 简历编写类工具： Kickresume 的 AI 简历写作器：使用 OpenAI 的 GPT4 语言模型自动生成简历，为简历摘要、工作经验和教育等专业部分编写内容，并保持一致语调。 Rezi：是一个领先的 AI 简历构建平台，使用先进的 AI 技术自动化创建可雇佣简历的每个方面，包括写作、编辑、格式化和优化。 Huntr 的 AI 简历构建器：提供免费的简历模板，以及 AI 生成的总结/技能/成就生成器和 AI 驱动的简历工作匹配。更多 AI 简历产品，还可以查看这里：https://www.waytoagi.com/category/79 以上工具都可以帮助您快速、高效地完成工作总结，您可以根据自己的需要选择最适合您的工具。请注意，内容由 AI 大模型生成，请仔细甄别。
2025-01-15
通往AGI之路的目的是什麼？
“通往 AGI 之路”是一个由开发者、学者和有志人士等参与的学习社区和开源的 AI 知识库。其目的包括： 1. 以“无弯路，全速前进”为目标，助力每一个怀揣 AI 梦想的人疾速前行。 2. 为学习者提供系统全面的 AI 学习路径，涵盖从基础概念到实际应用的各个方面，帮助用户有效地获取 AI 知识，提高自身能力。 3. 是连接学习者、实践者和创新者的社区，让大家在这里碰撞思想，相互鼓舞，一同成长。 4. 提供丰富的学习资源，包括文章、教程、工具推荐以及最新的 AI 行业资讯等，并定期组织活动，如视频挑战赛、模型创作大赛等，鼓励成员在实践中学习，促进交流与合作。 其品牌 VI 融合了独特的设计元素，以彩虹色彰显多元性和创新，以鹿的形象象征智慧与优雅，通过非衬线字体展现现代感和清晰性，共同构建了一个充满活力和前瞻性的品牌形象。
2024-11-28
有什麼好的AI課程？
以下为您推荐野菩萨的 AI 课程： 预习周课程：包括 AI 绘画电脑配置要求、高效 AIGC 创意者的数字人工具包、SD 插件安装方法、画静为动的 AIGC 视频制作讲解等。 基础操作课：涵盖 AI 绘画通识课、AI 摄影虚拟的真实、AI 电影穿越的大门等内容。 核心范式课程：涉及词汇的纸牌屋、核心范式应用、控制随机性等方面。 SD WebUi 体系课程：包括 SD 基础部署、SD 文生图、图生图、局部重绘等。 ChatGPT 体系课程：有 ChatGPT 基础、核心文风、格式、思维模型等内容。 ComfyUI 与 AI 动画课程：包含部署和基本概念、基础工作流搭建、动画工作流搭建等。 应对 SORA 的视听语言课程：涉及通识欢迎参加电影的葬礼、影像赏析、基础戏剧影视文学等。 如果您想要免费获得这门课程，可以来参与 video battle，这是唯一一个获胜者就可以拥有课程的机会。每期的 video battle 的评委野菩萨老师都非常严格，需要寓意深度审美并存。 冠军奖励：4980 课程一份 亚军奖励：3980 课程一份 季军奖励：1980 课程一份 入围奖励：598 野神殿门票一张 人字头企业，讲究社会责任。无论您是 AI 小白还是深入学习者，这门课程都能带来帮助。希望大家在 AI 学习的道路上找到适合自己的课程，不断提升自己。您可以扫码添加菩萨老师助理，了解更多课程信息。让我们一起在“通往 AGI 之路”社区学习成长，探索 AI 的无限可能。
2024-10-31
面試主管請您於第二次面試時回答以下三個問題並以PPT呈現出來。 1. AI 在教育中的發展趨勢 AI 技術未來幾年在教育領域的發展趨勢是什麼？哪些創新技術或應用會對教育產生重大影響？ 2. AI 對教育角色的改變 隨著 AI 的應用增多，教師和學生的角色會發生哪些轉變？您如何看待 AI 在教學過程中的定位？ 3. AI 賦能的教育未來 請描述一個您心中 AI 賦能的未來教育場景。這個場景下，AI 如何幫助學生、教師和管理者提升教學與學習體驗？
很抱歉，目前知识库中没有关于您所提到的这三个问题的相关内容。但以下是为您提供的一些初步分析和思路： 对于“AI 在教育中的发展趋势”： AI 技术在未来几年于教育领域的发展趋势可能包括更加个性化的学习体验、智能化的教学辅助工具、虚拟现实和增强现实技术的融合应用等。创新技术如自适应学习系统能够根据学生的学习进度和特点提供定制化的学习内容；自然语言处理技术可以实现更智能的辅导和答疑。 对于“AI 对教育角色的改变”： 随着 AI 的应用增多，教师可能会从知识传授者转变为引导者和促进者，更多地关注学生的情感需求和综合素质培养。学生则会更加主动地参与学习过程，成为自我导向的学习者。AI 在教学过程中可以作为辅助工具，帮助教师提高教学效率，为学生提供个性化支持。 对于“AI 赋能的教育未来”： 在一个 AI 赋能的未来教育场景中，学生可以通过智能设备随时随地获取个性化的学习资源，AI 能够根据学生的学习情况实时调整教学内容和进度。教师可以借助 AI 分析学生的学习数据，更精准地进行教学设计和辅导。管理者能够利用 AI 进行教育资源的优化配置和决策制定，提升教育管理的效率和质量。 以上内容仅供参考，您可以根据实际情况进一步深入研究和完善。
2024-10-11
coze搭建智能体，用上传的文件和知识库的文件做对比，分析差异点。
以下是关于在 Coze 中搭建智能体的相关信息： 1. 证件照相关操作： 展示原图上传结果，基本脸型已换，生成效果与上传照片特征有关。 改背景可利用改图功能，一键改图效果更好，输出数据类型为图片。 豆包节点生成的是 URL 地址，与前者不同，在工作流使用有差异，可参考简单提示词。 介绍证件照工作流相关操作，包括通过提示词改背景颜色，设置输出方式为返回变量；讲解消耗 token 及保存结果相关问题；对按钮、表单添加事件并设置参数，限制上传文件数量；还涉及给表单和图片绑定数据，以及每次操作后刷新界面确保设置生效。 围绕操作讲解与优化展开，介绍 for meet 的设置，如表单事件操作、图片上传数量修改等，提及编程基础知识。还讲述成果图连接、绑定数据方法及注意事项。展示基本功能实现情况，分析换性别等问题成因，指出需在工作流优化提示词，也可尝试用视频模型解决，最后进入问答环节。 2. 多维表格的高速数据分析： 创建智能体，使用单 Agent 对话流模式。 编排对话流，创建新的对话流并关联智能体。 使用代码节点对两个插件获取的结果进行数据处理，注意代码节点输出的配置格式。 测试，找到一篇小红书笔记，试运行对话流，在对话窗口输入地址查看数据。 发布，选择多维表格，配置输出类型为文本，输入类型选择字段选择器，完善上架信息，可选择仅自己可用以加快审核。 3. 智能体与微信和微信群的连接： 创建知识库，可选择手动清洗数据提高准确性，包括在线知识库和本地文档。 在线知识库创建时，飞书在线文档中每个问题和答案以分割，可编辑修改和删除。 本地文档中注意拆分内容提高训练数据准确度，如将课程章节按固定方式人工标注和处理。 发布应用，确保在 Bot 商店中能够搜到。
2025-04-18
coze搭建知识库和上传文件做对比分析
以下是关于 Coze 搭建知识库和上传文件的对比分析： 创建文本型知识库： 自动分段与清洗：扣子可对上传的内容进行自动解析，支持复杂布局的文件处理，如识别段落、页眉/页脚/脚注等非重点内容，支持跨页跨栏的段落合并，支持解析表格中的图片和文档中的表格内容（目前仅支持带线框的表格）。操作步骤为在分段设置页面选择自动分段与清洗，然后依次单击下一步、确认，可查看分段效果，不满意可重新分段并使用自定义分段。 自定义：支持自定义分段规则、分段长度及预处理规则。操作时在分段设置页面选择自定义，然后依次设置分段规则和预处理规则，包括选择分段标识符、设置分段最大长度和文本预处理规则，最后单击下一步完成内容分段。 创建表格型知识库： 目前支持 4 种导入类型：本地文档、API、飞书、自定义。 本地文档：选择本地文档从本地文件中导入表格数据，目前支持上传 Excel 和 CSV 格式的文件，文件不得大于 20M，一次最多可上传 10 个文件，且表格内需要有列名和对应的数据。 API：参考特定操作从 API 返回数据中上传表格内容，包括选择 API、单击新增 API、输入 API URL 并选择数据更新频率，然后单击下一步。 飞书：参考特定操作从飞书表格中导入内容，包括选择飞书、在新增知识库页面单击授权并选择要导入数据的飞书账号、单击安装扣子应用（仅首次导入需授权和安装），然后选择要导入的表格并单击下一步。目前仅支持导入“我的空间”下的飞书文档，云文档的创建者必须是自己，暂不支持导入知识库和共享空间下的云文档。 上传文本内容： 在线数据：扣子支持自动抓取指定 URL 的内容，也支持手动采集指定页面上的内容，上传到数据库。 自动采集方式：适用于内容量大、需批量快速导入的场景。操作步骤为在文本格式页签下选择在线数据，然后依次单击下一步、自动采集、新增 URL，输入网站地址、选择是否定期同步及周期，最后单击确认，上传完成后单击下一步，系统会自动分片。 手动采集：适用于精准采集网页指定内容的场景。操作步骤为安装扩展程序，在文本格式页签下选择在线数据，然后依次单击下一步、手动采集、授予权限，输入采集内容的网址，标注提取内容，查看数据确认无误后完成并采集。
2025-04-18
如何搭建知识库
搭建知识库的方法如下： 使用 flowith 搭建： 选择“Manage Your Knowledge Base”，进入知识库管理页面。 点击左上角的加号添加新的知识库，给知识库起一个便于分辨的名字。 点击添加文件，建议使用 Markdown 格式的文件。 Flowith 会对文件进行抽取等处理，处理完毕后可在知识库管理页面测试检索。 使用 Dify 搭建： 准备数据：收集文本数据，进行清洗、分段等预处理。 创建数据集：在 Dify 中创建新数据集，上传准备好的文档并编写描述。 配置索引方式：提供三种索引方式，根据需求选择，如高质量模式、经济模式和 Q&A 分段模式。 集成至应用：将数据集集成到对话型应用中，配置数据集的使用方式。 持续优化：收集用户反馈，更新知识库内容和优化索引方式。 使用 Coze 智能体搭建： 手动清洗数据： 在线知识库：点击创建知识库，创建 FAQ 知识库，选择飞书文档，输入区分问题和答案，可编辑修改和删除，添加 Bot 并在调试区测试效果。 本地文档：注意拆分内容，提高训练数据准确度，按章节进行人工标注和处理，然后创建自定义清洗数据。 发布应用：点击发布，确保在 Bot 商店中能搜到。
2025-04-14
coze搭建工作流调用deepseek如何把模型的输出存入到多维表中
以下是将模型的输出存入到多维表中的步骤： 1. 逐步搭建 AI 智能体： 搭建整理入库工作流。 设置大模型节点提取稍后读元数据，使用 MiniMax 6.5s 245k，设置最大回复长度至 50000，以确保能完整解析长内容网页。 进行日期转时间戳，后续的飞书多维表格插件节点在入库日期字段时只支持 13 位时间戳，需要使用「日期转时间戳time_stamp_13」插件进行格式转化。 把稍后读元数据转换为飞书多维表格插件可用的格式，飞书多维表格插件目前（2024 年 08 月）只支持带有转义符的 string，以 Array<Object>格式输入，所以必须将之前得到的元数据数组进行格式转换。 添加「飞书多维表格add_records」插件，只需要设置{{app_token}}与{{records}}参数，将元数据写入飞书表格。 2. 搭建 Coze 工作流： 打开 Coze 的主页，登录后，在【工作空间】创建一个智能体。 在编排页面，给智能体编辑好人设，可先写一个简单的，然后点右上角自动优化，系统会自动补全更精细的描述。点击工作流的+，创建一个工作流。 大模型节点把 input 给到 DeepSeek，让 DeepSeek 按照提前规定的输出框架生成对应文案。 生图节点将输出给到图像生成组件画图。 结束输出时，两个输出给到最终的 end 作为最终的输出。注意在编写系统提示词时，如果需要 input 可被 DeepSeek 调用，需要用{{input}}作为参数引入，不然大模型不知道自己需要生成和这个 input 相关的结果。编排完，点击【试运行】，调试至满意后点击发布。
2025-04-14
如何搭建自己的知识库
以下是搭建自己知识库的方法： 1. 选择“Manage Your Knowledge Base”，进入知识库管理页面。 2. 在页面左上角点击加号，添加新的知识库，并为其起一个易于分辨的名字。 3. 点击添加文件，建议使用 Markdown 格式的文件。 4. 等待 Flowith 对文件进行抽取等处理。 5. 处理完毕后，可在知识库管理页面测试检索，输入关键词过滤相关内容。 此外，搭建本地知识库还需了解 RAG 技术： 1. RAG 是一种当需要依靠不包含在大模型训练集中的数据时所采用的主要方法，即先检索外部数据，然后在生成步骤中将这些数据传递给 LLM。 2. 一个 RAG 的应用包括文档加载、文本分割、存储、检索和输出 5 个过程。 文档加载：从多种不同来源加载文档，LangChain 提供了 100 多种不同的文档加载器。 文本分割：把 Documents 切分为指定大小的块。 存储：将切分好的文档块进行嵌入转换成向量的形式，并将 Embedding 后的向量数据存储到向量数据库。 检索：通过某种检索算法找到与输入问题相似的嵌入片。 输出：把问题以及检索出来的嵌入片一起提交给 LLM，生成更合理的答案。 对于基于 GPT API 搭建定制化知识库，涉及给 GPT 输入定制化的知识。由于 GPT3.5 一次交互支持的 Token 有限，OpenAI 提供了 embedding API 解决方案。Embeddings 是一个浮点数字的向量，两个向量之间的距离衡量它们的关联性，小距离表示高关联度。在 OpenAI 词嵌入中，靠近向量的词语在语义上相似。文档上有创建 embeddings 的示例。
2025-04-14
搭建在线知识库，在线客服
以下是关于搭建在线知识库和在线客服的相关内容： RAG 流程： 自顶向下，RAG 的流程分为离线数据处理和在线检索两个过程。 离线数据处理的目的是构建知识库，知识会按照某种格式及排列方式存储在其中等待使用。 在线检索是利用知识库和大模型进行查询的过程。 以构建智能问答客服为例，了解 RAG 流程中的“是什么”与“为什么”同等重要。 创建智能体： 手动清洗数据创建知识库： 点击创建知识库，创建画小二课程的 FAQ 知识库。 知识库的飞书在线文档中，每个问题和答案以“”分割。 选择飞书文档、自定义，输入“”，可编辑修改和删除。 点击添加 Bot，可在调试区测试效果。 本地文档： 注意拆分内容以提高训练数据准确度。 以画小二课程为例，先放入大章节名称内容，再按固定方式细化处理每个章节。 发布应用：点击发布，确保在 Bot 商店中能搜到。 开发：GLM 等大模型外接数据库： 项目启动：包括 web 启动（运行 web.py，显存不足调整模型参数，修改连接）、API 模式启动、命令行模式启动。 上传知识库：在左侧知识库问答中选择新建知识库，可传输 txt、pdf 等。可以调整 prompt，匹配不同的知识库，让 LLM 扮演不同的角色，如上传公司财报充当财务分析师、上传客服聊天记录充当智能客服等。MOSS 同理。
2025-04-13
我要写论文，需要用什么ai工具‘
在论文写作中，以下是一些常用的 AI 工具： 1. 文献管理和搜索： Zotero：结合 AI 技术，能自动提取文献信息，便于管理和整理参考文献。 Semantic Scholar：由 AI 驱动的学术搜索引擎，提供文献推荐和引用分析。 2. 内容生成和辅助写作： Grammarly：通过 AI 技术进行文本校对、语法修正和写作风格建议，提升语言质量。 Quillbot：基于 AI 的重写和摘要工具，可精简和优化论文内容。 3. 研究和数据分析： Google Colab：提供基于云的 Jupyter 笔记本环境，支持 AI 和机器学习研究，方便进行数据分析和可视化。 Knitro：用于数学建模和优化，助力复杂数据分析和模型构建。 4. 论文结构和格式： LaTeX：虽不是纯粹的 AI 工具，但结合自动化和模板，能高效处理论文格式和数学公式。 Overleaf：在线 LaTeX 编辑器，有丰富模板库和协作功能，简化论文编写。 5. 研究伦理和抄袭检测： Turnitin：广泛使用的抄袭检测工具，确保论文原创性。 Crossref Similarity Check：检测潜在抄袭问题。 利用 AI 写课题的步骤和建议如下： 1. 确定课题主题：明确研究兴趣和目标，选择有价值和创新性的主题。 2. 收集背景资料：使用学术搜索引擎和文献管理软件等 AI 工具搜集相关文献和资料。 3. 分析和总结信息：借助 AI 文本分析工具提取关键信息和主要观点。 4. 生成大纲：用 AI 写作助手生成包括引言、文献综述、方法论、结果和讨论等部分的大纲。 5. 撰写文献综述：利用 AI 工具确保内容准确完整。 6. 构建方法论：根据研究需求，采用 AI 建议的方法和技术设计研究方法。 7. 数据分析：若涉及数据收集和分析，使用 AI 数据分析工具处理和解释数据。 8. 撰写和编辑：借助 AI 写作工具撰写各部分，并检查语法和风格。 9. 生成参考文献：使用 AI 文献管理工具生成正确格式。 10. 审阅和修改：用 AI 审阅工具检查逻辑性和一致性，根据反馈修改。 11. 提交前的检查：使用抄袭检测工具确保原创性，做最后的格式调整。 AI 文章排版工具方面： 1. Grammarly：不仅检查语法和拼写，还具备一定排版功能，可改进文档风格和流畅性。 2. QuillBot：AI 驱动的写作和排版工具，能改进文本清晰度和流畅性。 3. Latex：常用于学术论文排版，使用标记语言描述格式，有 AI 辅助的编辑器和插件简化过程。 4. PandaDoc：文档自动化平台，用 AI 帮助创建、格式化和自动化生成文档，适用于商业和技术文档。 5. Wordtune：AI 写作助手，重新表述和改进文本，使其更清晰专业。 6. Overleaf：在线 Latex 编辑器，提供丰富模板和协作工具，适合学术写作排版。 选择合适的 AI 文章排版工具需考虑文档类型、出版标准和个人偏好。学术论文常用 Latex 和 Overleaf，一般文章和商业文档则 Grammarly 和 PandaDoc 等可能更适用。
2025-04-14
推荐几个AI工具及其使用方法，我要用于病案质控
以下为您推荐几个可用于病案质控的 AI 工具及其使用方法： 1. Scite.ai：这是一个为研究人员、学者和行业专业人员打造的创新平台，旨在增强他们对科学文献的洞察。它提供了一系列工具，如引用声明搜索、自定义仪表板和参考检查，这些都能简化您的学术工作。您可以通过访问使用。 2. Scholarcy：这是一款科研神器，主要为做科研、学术、写论文的人准备。它可以从文档中提取结构化数据，并通过知识归纳引擎生成文章概要，精炼地呈现文章的总结信息，分析中包含关键概念、摘要、学术亮点、学术总结、比较分析、局限等板块的内容。您可以通过使用。 3. ChatGPT：这是一个强大的自然语言处理模型，可以提供有关病案质控的修改意见。您可以向它提供您的文章，并提出您的问题和需求，它将尽力为您提供帮助。您可以通过使用。 这些工具可以帮助您从不同的角度审视和改进您的病案质控工作，您可以根据自己的具体需求选择合适的工具进行尝试。请注意，内容由 AI 大模型生成，请仔细甄别。
2025-04-13
如何用ai创作一部小说，路径是怎样的，需要用到哪些工具
用 AI 创作一部小说通常包括以下路径和可能用到的工具： 路径： 1. 小说内容构思：明确小说的主题、情节、角色等核心要素。 2. 角色与场景设定：细致描绘角色的特点和故事发生的场景。 3. 情节推进与发展：合理安排故事的起承转合，增加冲突和悬念。 4. 语言表达与修饰：使文字生动、准确，富有感染力。 工具： 1. 文本生成工具：如 ChatGPT 等，可辅助生成小说的框架、情节、对话等内容。 2. 图像生成工具：如 Stable Diffusion 或 Midjourney，用于生成角色和场景的视觉描述，帮助激发创作灵感。 如果要将小说制作成视频，还需要以下步骤和工具： 步骤： 1. 小说内容分析：使用 AI 工具（如 ChatGPT）提取关键场景、角色和情节。 2. 生成角色与场景描述：利用工具（如 Stable Diffusion 或 Midjourney）生成角色和场景的视觉描述。 3. 图像生成：使用 AI 图像生成工具创建角色和场景的图像。 4. 视频脚本制作：将提取的关键点和生成的图像组合成视频脚本。 5. 音频制作：借助 AI 配音工具（如 Adobe Firefly）将小说文本转换为语音，添加背景音乐和音效。 6. 视频编辑与合成：使用视频编辑软件（如 Clipfly 或 VEED.IO）将图像、音频和文字合成为视频。 7. 后期处理：对生成的视频进行剪辑、添加特效和转场，以提高视频质量。 8. 审阅与调整：观看生成的视频，根据需要进行调整。 9. 输出与分享：完成编辑后，输出最终视频，并在所需平台上分享。 工具及网址： 1. Stable Diffusion：一种 AI 图像生成模型，网址：https://github.com/StabilityAI 2. Midjourney：AI 图像生成工具，网址：https://www.midjourney.com 3. Adobe Firefly：Adobe 的 AI 创意工具，网址：https://www.adobe.com/products/firefly.html 4. Pika AI：文本生成视频的 AI 工具，网址：https://pika.art/waitlist 5. Clipfly：一站式 AI 视频生成和剪辑平台，网址：https://www.aihub.cn/tools/video/clipfly/ 6. VEED.IO：在线视频编辑工具，具有 AI 视频生成器功能，网址：https://www.veed.io/zhCN/tools/aivideo 7. 极虎漫剪：结合 Stable Diffusion 技术的小说推文视频创作提效工具，网址：https://tiger.easyartx.com/landing 8. 故事 AI 绘图：小说转视频的 AI 工具，网址：https://www.aihub.cn/tools/video/gushiai/ 请注意，具体的操作步骤和所需工具可能会根据项目的具体需求和个人偏好有所不同。此外，AI 工具的可用性和功能也可能会随时间而变化，建议直接访问上述提供的工具网址获取最新信息和使用指南。
2025-03-28
我想写一篇本科生论文，利用ai工具来帮我更好完善，需要用到那些常用指令
在本科生论文写作中，以下是一些常用的 AI 指令和相关工具： 1. 内容生成和辅助写作： 指令示例：“根据以下关于我的信息，写一篇四段的大学申请论文：我来自西班牙巴塞罗那。尽管我的童年经历了一些创伤性事件，比如我 6 岁时父亲去世，但我仍然认为我有一个相当快乐的童年。在我的童年时期，我经常换学校，从公立学校到非常宗教的私立学校。我做过的最‘异国情调’的事情之一是在爱达荷州的双子瀑布与我的大家庭一起度过六年级。我很早就开始工作了。我的第一份工作是 13 岁时的英语老师。在那之后，以及在我的学习过程中，我做过老师、服务员，甚至建筑工人。” 工具：Grammarly ，通过 AI 技术提供文本校对、语法修正和写作风格建议，帮助提高论文的语言质量；Quillbot ，一个基于 AI 的重写和摘要工具，可以帮助研究人员精简和优化论文内容。 2. 文献管理和搜索： 工具：Zotero ，结合 AI 技术，可以自动提取文献信息，帮助研究人员管理和整理参考文献；Semantic Scholar ，一个由 AI 驱动的学术搜索引擎，能够提供相关的文献推荐和引用分析。 3. 研究和数据分析： 工具：Google Colab ，提供基于云的 Jupyter 笔记本环境，支持 AI 和机器学习研究，便于进行数据分析和可视化；Knitro ，一个用于数学建模和优化的软件，可以帮助研究人员进行复杂的数据分析和模型构建。 4. 论文结构和格式： 工具：LaTeX ，虽然不是纯粹的 AI 工具，但结合了自动化和模板，可以高效地处理论文格式和数学公式；Overleaf ，一个在线 LaTeX 编辑器，提供丰富的模板库和协作功能，简化论文编写过程。 5. 研究伦理和抄袭检测： 工具：Turnitin ，一个广泛使用的抄袭检测工具，帮助确保论文的原创性；Crossref Similarity Check ，通过与已发表作品的比较，检测潜在的抄袭问题。 需要注意的是，使用这些 AI 工具时，要结合自己的写作风格和需求，选择最合适的辅助工具，同时要确保使用方式符合学术道德和规范。
2025-03-15
我需要用deepseek生成参考文献，我需要指令
以下是关于 DeepSeek 生成参考文献的相关指令： 1. 基础指令框架： 四要素模板：如果不知道如何表达，还是可以套用框架指令。 格式控制语法：强制结构使用```包裹格式要求，占位符标记用{{}}标注需填充内容，优先级符号>表示关键要求，!表示禁止项。 2. 进阶控制技巧： 思维链引导：分步标记法，如请逐步思考：1.问题分析→2.方案设计→3.风险评估；苏格拉底式追问，在得出最终结论前，请先列举三个可能存在的认知偏差。 知识库调用：领域限定指令，如基于 2023 版中国药典，说明头孢类药物的配伍禁忌；文献引用模式，如以 Nature 2022 年发表的论文为参考，解释 CRISPRCas9 最新突破。 3. 高级调试策略： 模糊指令优化：对于宽泛需求，添加维度约束；对于主观表述，量化标准。 迭代优化法：首轮生成获取基础内容，特征强化加强某段的技术细节描述，风格调整改用特定语气并添加结论部分，最终校验检查时间逻辑一致性和可能的事实性错误。 希望这些信息对您有所帮助。
2025-03-14
我想要制作一款小游戏，上架到抖音和微信，请你给我列举出需要用到的ai和软件
以下是制作小游戏并上架到抖音和微信可能需要用到的 AI 和软件： AI 方面：可以利用 AI 描述需求生成游戏代码，例如向云雀 3.5 等模型描述需求来辅助生成代码。还可以让 AI 处理图片、绘制角色形象等。 软件工具： 图像托管网站：用于上传游戏中的图片，选择无需登录、兼容性强的网站。 代码解释网站：有专门解释代码改游戏 bug 的网站，部分有免费额度。 GitHub：用于游戏发布，需要注册账号，设置游戏名，选择公共或锁定，上传文件等。 Zion：支持小程序、Web、AI 行为流全栈搭建，APP 端全栈搭建 2025 上线。 Coze：可作为后端服务。 微信开发者工具：用于微信小程序的开发。
2025-03-10