免费POC, 零成本试错
FDE知识库

FDE知识库

学习大模型的前沿技术与行业落地应用


收藏

大厂的本地知识库搭建经验

发布日期:2025-05-15 05:41:55 浏览次数: 2561
作者:深度学习视觉

微信搜一搜,关注“深度学习视觉”

推荐语

大厂如何高效搭建本地知识库?本文分享了技术选型、内容处理和部署策略的实用经验。

核心内容:
1. 技术选型与分词策略:大模型、微调、RAG等技术的特点及适用场景
2. 内容类型差异化处理:文本、表格、代码的向量化方法和模型选择
3. 检索策略与参数调优:BM25、向量检索、混合检索及参数设置经验分享

杨芳贤
53AI创始人/腾讯云(TVP)最具价值专家

技术选择

技术
特点
适用场景
大模型
通用+响应快
简单查询、通用知识问答、即时响应场景
微调
理解+格式
需要模型深度理解特定领域,统一输出格式风格
RAG
实时性
更新频繁的信息,无法感知全文结构和主旨,可后期添加
混合方案
RAG+LLM
RAG检索到的内容让模型阅读后重新生成

微调降本
对于常规大量的文档建议微调

分词策略

策略
描述
领域特性适配
法律文本中的“第X条”、医疗文本中的“xx指标”等需要整体保留
语言特性差异
中文需要字词级分词,专业中文术语需整体处理
基础分词
简单按句号、逗号等标点切分
语义分词
考虑段落、小节语义完整性的智能切分
混合分词
结合文档结构(标题、章节)和语义边界的复合切分

内容类型差异化处理

类型
处理方法
文本内容
使用文本 embedding 模型
表格数据
结构化向量化或表格专用 embedding,勿对表格内容切分
代码片段
代码专用 embedding 模型

向量模型选择依据

依据
描述
通用应用
OpenAI text-embedding-3-large、Cohere embed v3 等通用模型足够
专业领域
BGE、GTE 等开源模型可针对垂直领域微调提升效果
混合索引策略
关键词索引+向量索引的双重索引往往比单一索引效果更好
维度与性能权衡
更高维度收益渐窄

多样化检索策略

策略
描述
BM25
适合精确关键词匹配,在技术文档、产品手册中表现良好
向量检索
适合语义理解,在客户问询、意图分析中表现良好
混合检索
结合两者优势,实践中对召回率的提升有明显效果

参数调优经验

参数
描述
top_k 值选择
一般推荐 3-5 个片段,太多引入噪音,太少可能缺失关键信息
相似度阈值
0.7-0.8 是常见起点,根据业务场景容错性调整

检索增强技术

技术
描述
查询改写
将用户问题转化为更适合检索的形式
结果重排序
根据多维度相关性(不仅是向量相似度)重新排序
问题对问题检索
模型提前基于文档生成可能的问题
答案对答案检索
先产生 LLM 的假设回答,然后与知识库中匹配形似度高的回答

排序策略

策略
描述
单一维度
单一向量相似度排序
多因素引导
多因素加权排序
模型引导
重排序模型
交互信息引导
使用点击、停留时间、反馈等用户行为数据优化排序

敏感数据处理

技术
描述
实体识别和替换
使用 NER 工具识别敏感实体
占位符替换实际内容
如“客户 A”、“金额 X”
本地向量化
在本地完成向量化,只把向量而非原始文本发送至云端
混合架构
敏感数据本地处理,非敏感数据云端处理

部署策略

策略
描述
速度优先
云服务+商业 API
混合部署
核心功能使用高质量商业 API,高频非核心使用本地
完全本地化
根据业务需求选择性实施

多段式上线

阶段
描述
能用就行
根据业务最低容错率判定
基于反馈重点优化
反馈机制
持续优化
持续优化策略

反馈机制

机制
描述
直接反馈
点赞/点踩、评分、问题报告
间接反馈
使用时长、重复提问率、人工求助转化率
反馈分析
识别常见失败模式和根本原因

持续优化策略

策略
描述
数据处理
补充缺失信息、调整分块策略
检索模块
调整检索参数、改进排序算法
生成优化
优化提示词模板、调整模型参数

数据处理

属性
描述
相关性
数据与业务问题的相关性;剔除低相关性数据
实时性
实时性属性的数据判断是否过时
权威性
根据不同渠道的数据添加不同的权威度
结构化程度
评估信息组织的清晰度;定制化处理和存储
去重
识别并合并重复或高度相似内容
去噪
移除格式标记、无意义内容、噪音数据
结构化程度
将非结构化内容转化为结构化形式

知识库更新策略

策略
描述
增量更新
只处理新增或变更内容
定期全量更新
针对关键数据源的周期性刷新
差异化更新
基于时效性进行差异化的更新频率

系统升级能力

组件
描述
分词组件
可独立升级而不影响其他部分
数据库
平滑迁移或替换
灵活切换模型
大模型供应商可灵活切换

开源框架选择

框架
描述
RAGFlow
适合快速部署,内置多种优化策略
LangChain
生态丰富,需要代码能力,灵活开发

向量数据库

规模
描述
小规模应用
FAISS、Chroma 等轻量级选项足够
大规模应用
Weaviate、Milvus、Pinecone 等分布式解决方案
特殊需求
Qdrant(过滤功能强)、PGVector(与现有 PostgreSQL 集成)

扩展接口预留

接口
描述
数据源接口
支持未来接入新数据源
评估接口
便于接入第三方评估工具
人工干预接口
在自动化流程中预留人工介入点

评估指标多维度

指标
描述
准确性
回答中正确信息的比例
完整性
回答覆盖问题所需信息的程度
相关性
回答与问题的直接关联程度
有用性
回答对用户实际问题的解决价值

构建标准测试集

标准
描述
核心问题
覆盖核心业务场景的典型问题
困难问题
包含边界情况和挑战性问题
按需更新
随业务变化更新

监控体系

监控
描述
技术监控
响应时间、错误率、系统负载
业务监控
使用频率、解决率、用户满意度
成本监控
API 调用量、存储使用量、计算资源消耗

53AI,企业落地大模型首选服务商

产品:场景落地咨询+大模型应用平台+行业解决方案

承诺:免费POC验证,效果达标后再合作。零风险落地应用大模型,已交付160+中大型企业

联系我们

售前咨询
186 6662 7370
预约演示
185 8882 0121

微信扫码

添加专属顾问

回到顶部

加载中...

扫码咨询

扫码登录
登录即表示您同意《53AI网站服务协议》
服务协议

欢迎您使用【53AI 官方网站】(以下简称“本网站”或“我们”)。本《会员服务协议》(以下简称“本协议”)是您(以下简称“会员”或“用户”)与【深圳市博思协创网络科技有限公司】之间关于注册、登录及使用本网站会员服务所订立的法律协议。

在您注册或登录前,请务必审慎阅读、充分理解各条款内容,特别是免除或限制责任的条款、知识产权条款、争议解决条款等。此类条款将以加粗形式提示您注意。 当您通过微信公众号授权、手机验证码验证或其他方式成功登录本网站时,即视为您已完全理解并同意接受本协议的全部内容。

一、 定义

本网站:指由【深圳市博思协创网络科技有限公司】运营的,域名为【53ai.com】的网站及相关移动端页面。

会员服务:指本网站向注册会员提供的知识库文章查阅、内容检索及其他相关增值服务。

知识库内容:指本网站发布的包括但不限于文字、图表、数据、研究报告、行业分析等数字化内容资源。

二、 账号注册与登录

登录方式:本网站支持以下登录方式,您可根据实际情况选择:

微信公众号授权登录:您同意将您的微信OpenID信息授权给本网站,用于创建或关联会员账号。

手机验证码登录:您需提供真实有效的手机号码,并通过短信验证码完成身份验证与登录/注册。

账号安全:您的账号仅限您本人使用,禁止赠与、借用、租用、转让或售卖。因您保管不善导致的账号被盗、密码泄露等损失,由您自行承担。

实名认证:根据相关法律法规要求,我们可能要求您在特定功能下完成实名认证。如您拒绝提供,可能无法使用部分或全部服务。

未成年人保护:若您未满18周岁,请在法定监护人的陪同下阅读本协议,并在征得监护人同意后使用本服务。

三、 服务内容与规范

知识库查阅权限:会员登录后,有权按照其会员等级对应的权限范围,在线浏览、检索本网站知识库中的相关文章及内容。

服务变更:我们有权根据业务发展需要,调整、变更或终止部分服务内容,并将以网站公告、公众号消息等方式提前通知。

禁止行为:您在使用服务时不得实施以下行为:

利用技术手段批量爬取、下载、转存知识库内容;

将知识库内容用于商业目的或未经授权地向第三方传播;

干扰本网站正常运行或侵犯其他用户合法权益;

发布违法违规信息或从事违反公序良俗的活动。

四、 知识产权声明

权利归属:本网站知识库中的排版设计、软件代码等内容的知识产权均归【公司全称】或原权利人所有,受《中华人民共和国著作权法》等法律保护。

有限许可:本网站授予会员一项非独占、不可转让、不可转授权的普通许可,仅限于个人学习、研究之目的在线查阅知识库内容。

侵权追责:未经书面许可,任何单位或个人不得以任何形式复制、转载、摘编、镜像、汇编或以其他方式使用上述内容。一经发现,我们保留追究其法律责任的权利。

五、 个人信息保护

我们重视对您个人信息的保护。关于我们如何收集、使用、存储和保护您的个人信息,请单独阅读 《隐私政策》。

您通过微信公众号授权或手机号验证所提供的信息,我们将严格按照《个人信息保护法》的规定处理,仅用于身份识别、服务提供及安全验证等必要用途。

您可以随时通过网站设置或联系客服行使查阅、更正、删除个人信息及撤回授权同意的权利。

六、 免责声明

内容准确性:知识库内容仅供参考,不构成专业建议。我们不对其完整性、准确性、时效性作任何明示或暗示的保证,您应自行判断并承担使用风险。

不可抗力:因自然灾害、政策法规变化、网络故障、第三方平台接口异常(如微信接口维护、运营商短信通道故障)等不可抗力导致的服务中断或延迟,我们不承担违约责任。

第三方链接:本网站可能包含指向第三方网站的链接,该等网站的内容和服务不受我们控制,请您自行甄别风险。

七、 违约责任

如您违反本协议约定,我们有权视情节采取警告、限制功能、暂停服务、注销账号等措施,并保留要求赔偿损失的权利。

如因您的违约行为导致我们遭受行政处罚、第三方索赔或商誉损失,您应承担全部赔偿责任(包括但不限于罚款、赔偿金、律师费、公证费等)。

八、 法律适用与争议解决

本协议的订立、执行和解释均适用中华人民共和国大陆地区法律。

因本协议产生的或与本协议有关的任何争议,双方应友好协商解决;协商不成的,任何一方均可向【公司所在地】有管辖权的人民法院提起诉讼。

九、 其他

本协议构成双方就本服务达成的完整协议,取代此前任何口头或书面约定。

本协议任一条款被认定为无效或不可执行的,不影响其他条款的效力。

我们对本协议享有最终解释权,并在法律允许的范围内保留随时修改的权利。修改后的协议一经公布即生效,继续使用服务即视为同意修订内容。


已查阅