网页
综合
更新时间 2026-11-13 19:52:21
使用Dify与Tablestore构建大模型Serverless RAG知识库-开发者社区-阿里云
自动蜘蛛
developer.aliyun.com
正文约 2067 字
在大模型时代,如何高效应用领域知识、解决大模型的幻觉等问题,成为大模型渗透到每个行业需要解决的核心问题。随着生成式人工智能技术的快速发展,大型语言模型(LLM)虽然在语言理解和生成能力上展现出显著优势,但其知识局限性与幻觉问题(即生成不实或无根据信息的倾向)始终制约着其在专业领域的实际应用。为突破这一瓶颈,检索增强生成(Retrieval-Augmented Generation, RAG) 通过融合检索技术与生成式模型,构建了动态的知识获取与融合框架,成为解决行业落地关键问题的有效路径。
RAG 的核心是构建一个供大模型动态参考的知识库,知识库的应用具备几个特性:
知识时效性保障:传统大模型的训练数据截止时间固定,而RAG通过接入实时更新的知识库,可动态引入新知识,避免因知识滞后导致的错误。
领域适配性增强:通过构建垂直领域的知识图谱或专用语料库,RAG能够显著提升模型对专业术语、行业规则的理解能力。
多模态知识整合:现代RAG系统支持文本、表格、图像等多模态知识源的融合。
Dify 为开发者提供了健全的应用模版和编排框架,你可以基于它们快速构建大型语言模型驱动的生成式AI 应用,将创意变为现实,也可以随时按需无缝扩展,驱动业务增长。 通过可视化的提示词编排和数据集嵌入,零代码即可快速构建对话机器人或AI 助理,并可持续优化对话策略,革新人机交互体验;
阿里云表格存储 Tablestore 是一款 Serverless 的分布式结构化数据存储服务,主要特点是分布式、Serverless 开箱即用、按量付费、水平扩展、支持向量/标量检索、查询功能丰富和性能优秀等。
本文将基于Dify x Tablestore 的向量/标量检索能力,以表格存储官网文档为知识库,搭建一个“表格存储技术支持聊天助手”。
通过结合 Dify 和 Tablestore 去实现一个知识库 RAG 系统,这套架构相比本地部署向量数据库有何优点?
低代码、Serverless 免运维:Dify 作为一个 AI 低代码平台,支持快速构建、部署应用;而 Tablestore 具备一键开通、Serverless 特性,无需关注数据库运维,降低应用复杂度;
共享知识库:基于Tablestore搭建的知识库,跨地域可共享,可同时被多个Dify RAG系统访问;
数据稳定可靠:Tablestore 默认提供数据跨地域多副本存储(3AZ),数据可靠性高达99.999999999%(11个9),为数据保驾护航;
规模增长无上限:Tablestore基于阿里云自研存储引擎,支持数据量从GB到PB级无缝扩展,业务增长无需关注系统容量;
低成本:Tablestore 按量付费,灵活可控;按实际使用付费,避免资源闲置。
部署流程参考:Dify Community;Tablestore 已接入 Dify vdb,并在v1.2.0版本中发布。部署过程中修改.env 配置文件,使用 Tablestore 作为向量数据库,并配置访问实例信息。
本节将基于上面搭建的系统,创建私有知识库,并上传表格存储官方文档信息。通过该知识库,演示 Dify x Tablestore 搭建的 RAG 系统功能;
创建空白知识库,名称【TableStore-Rag】
导入本地知识文件,经过文本清洗、embedding 后写入 Tablestore 向量数据库中。
通过文档列表,获取文档是否导入成功;失败文档可重试。
导入过程中,Dify 自动在表格存储上创建表和索引,并将数据 embedding 后写入表内
召回测试中支持向量检索、全文检索、混合检索;可根据匹配相似度排序,获取 TopK 相似文档。
从大模型供应商处获取 API Key,添加至 dify
未使用 RAG:提问大模型关于用户使用表格存储的相关细节问题,大模型根据训练知识,给出回答。
使用 RAG: 输入提示词,选择知识库【Tablestore-Rag】,再次提问大模型。
对比使用知识库前后大模型对同一问题的回答,大模型+知识库能给出更加精确的回答。因此通过知识库,弥补了大模型知识的时效性、领域适配性的问题。
本文基于Dify x Tablestore 的向量/标量检索能力,演示了如何使用 RAG 实现一个技术支持助手,避免大模型乱说问题,提升大模型载垂直领域的准确性;Dify x Tablestore 这套系统具有包括低代码、Serverless免运维、跨地域共享知识库、高数据可靠性、弹性无限扩展及低成本等优点,是构建 RAG 系统的一个很好的选择。
最后,欢迎加入我们的钉钉公开群,与我们一起探讨 AI 技术。
关注阿里云公众号或下载阿里云APP,关注云资讯,随时随地运维管控云服务
© 2009-现在 Aliyun.com 版权所有 增值电信业务经营许可证: 浙B2-20080101 域名注册服务机构许可: 浙D3-20210002
浙公网安备 33010602009975号
本页为82搜索生成的网页快照,内容来自站内索引;演示数据的原文链接仅作示例。