2026年7月9日 周四晚上19:30,报名腾讯会议了解“如何构建自进化的动态知识库(Brain)”(限30人)
免费POC, 零成本试错
FDE知识库

FDE知识库

学习大模型的前沿技术与行业落地应用


收藏

从答案到洞察:Structured RAG正在重塑企业知识库的底层逻辑

发布日期:2025-11-14 20:51:10 浏览次数: 2307
作者:子非AI

微信搜一搜,关注“子非AI”

推荐语

企业知识库迎来革命性升级!Structured RAG通过结构化处理+精准查询,让AI回答复杂问题不再"模糊"。

核心内容:
1. 传统RAG在复杂分析查询中的三大局限
2. S-RAG的创新架构:从非结构化到结构化的范式转变
3. 混合架构如何实现60%准确率提升的商业价值

杨芳贤
53AI创始人/腾讯云(TVP)最具价值专家

 

  • • 传统RAG的分析瓶颈:在处理需要聚合、比较或全面筛选的企业级复杂查询时,基于向量检索的传统RAG(检索增强生成)系统在准确性和完整性上存在固有局限。
  • • Structured RAG (S-RAG) 范式:S-RAG提出了一种新方法,在离线阶段将非结构化文档预处理,提取信息并构建成结构化数据库。
  • • 查询即代码:在响应用户请求时,S-RAG将自然语言问题转化为精确的数据库查询(如SQL),从而实现确定性的计算与推理,而非模糊的语义匹配。
  • • 性能验证:实验数据显示,S-RAG在聚合类问题上的准确率相较于传统RAG有显著提升(高达60%),并且能够实现近乎完美的召回率,为高风险应用场景提供了可靠性基础。
  • • 混合架构的价值:通过结合S-RAG的精确性和传统RAG的语义灵活性,混合架构能够高效处理更广泛的查询类型,代表了下一代企业级知识系统的发展方向。

当RAG遭遇分析瓶颈:问题的根源

想象这样一个场景:在一次关键的季度复盘会上,一位决策者向公司的AI知识助手提问:“我们所有子公司中,上一财年资本支出最高的是哪家?具体金额是多少?” AI助手或许能流畅地生成一段文本,但其内容可能只是相关报告的摘要,甚至包含错误信息。

这暴露了当前广泛应用的 检索增强生成(RAG) 技术在企业实际应用中的一个核心困境。当问题从简单的“信息查找”转向复杂的“分析推理”时,传统RAG开始显现其局限性。

图1:传统RAG在金融问题上的表现不佳图1:一个典型的金融查询场景,传统RAG难以直接从文本中计算出精确答案,而S-RAG通过SQL查询可直接获得结果。

这种局限性主要源于其底层机制,并体现在三个关键方面:

  1. 1. 无法有效处理聚合问题:传统RAG通过向量相似度检索文本片段。但面对“计算所有项目的平均成本”或“找出销售额最高的五个区域”这类需要跨多个文档进行数学运算的查询时,它无能为力。大语言模型(LLM)本身并不擅长在有限的上下文中对零散的文本进行精确计算。
  2. 2. 难以保证结果的完整性:在合规、审计等领域,“列出所有符合特定条件的合同”是常见需求,答案的完整性至关重要。基于相似度检索的RAG本质上是概率性的,旨在寻找“最相关”而非“所有相关”的文档。这种机制无法保证100%的召回率,任何遗漏都可能带来风险。
  3. 3. 在密集信息语料库中表现不佳:在金融财报、法律文书、技术手册等内容中,文档的格式、术语和行文风格高度统一。这使得向量模型难以区分细微但关键的差异,导致检索结果充斥着大量语义相近但信息无效的“噪音”,干扰LLM生成准确答案。

S-RAG:用数据库思维重塑AI问答

为了克服这些瓶颈,一种名为Structured RAG (S-RAG) 的新范式应运而生。其核心思想是回归经典的数据处理原则:在进行复杂查询之前,先将非结构化信息转化为结构化数据

这个过程主要分为两个阶段:离线的信息摄取和在线的查询推理。

图2:S-RAG系统工作流程概览图2:S-RAG系统工作流程,分为离线摄取(上)和在线推理(下)两个阶段。

第一步:离线摄取 (Ingestion) - 构建结构化知识库

这一阶段在后台自动完成,旨在将原始文档转化为可供精确查询的数据库。

  • • 模式预测 (Schema Prediction):系统首先分析少量样本文档和代表性问题,利用LLM的理解能力,智能推断出文档集共同的数据“模式”(Schema)。例如,对于一系列财报,系统能自动识别出“公司名”、“财年”、“总收入”等关键字段及其数据类型。
  • • 记录预测 (Record Prediction):定义好模式后,S-RAG会遍历整个文档库,从每份文档中精确抽取出对应模式的数值。同时,它会进行关键的标准化处理,例如,将文本中的“一百万”、“1M”和“1,000,000”都统一为数字1000000。这些规整、标准化的信息最终被存入一个结构化数据库表中。
图3:S-RAG概念示例图3:S-RAG概念示例,将一组非结构化的简历(Corpus)根据预定义模式(Schema)转换为结构化的记录(Record)。

第二步:在线推理 (Inference) - 从自然语言到精确查询

当用户提出问题时,S-RAG的运行机制与传统RAG截然不同。

  • • 它不再进行模糊的语义搜索,而是将用户的自然语言问题,精准地翻译成一条数据库查询语句(如SQL)
  • • 数据库执行这条确定性的指令后,返回一个或一组精确的数据。最后,LLM将这些数据结果组织成通顺、自然的语言呈现给用户。整个过程逻辑清晰、结果精确且可验证。

实证检验:S-RAG的性能表现

为了客观评估S-RAG的有效性,研究人员构建了两个新的数据集(Hotels、World Cup)并结合已有的金融分析基准(FinanceBench)进行了全面测试。

  • • 数据集概况
    为了更好地模拟需要多文档聚合的真实场景,研究人员创建了两个新数据集。Hotels数据集完全由AI生成,以确保模型无法利用先验知识;World Cup数据集则基于真实的维基百科页面。
Dataset
#Docs
#Questions
Doc Length (avg)
Answer Length (avg)
Requires Aggregation
FinanceBench
10,798
1,023
25,603
114
Partial
World Cup
22
83
2,752
19
Yes
Hotels
350
193
1,180
12
Yes
  • 表1: 实验使用的数据集统计与特性。


  • • 基线模型的挑战
    在评估前,研究人员测试了强大的LLM(如GPT-o3)在没有外部知识(Zero-shot)的情况下回答这些问题的能力。结果显示,模型对于Hotels这类全新数据几乎无法回答,而对World Cup这类基于公共知识的数据则表现较好。这证明了对于私有、非公开数据,一个强大的RAG系统是不可或缺的。
Dataset
Answer Comparison
Answer Recall
FinanceBench-Agg
0.08
0.09
World Cup
0.71
0.72
Hotels
0.00
0.01
  • 表2: LLM在无外部知识(Zero-shot)情况下的表现。

  • • 核心性能对比
    在聚合类问题的基准测试中,S-RAG相较于传统方法表现出明显优势。
    图4:聚合问题上的答案准确率对比
    图4:在聚合问题基准测试中,S-RAG(Structured RAG)的准确率显著高于基于向量的RAG(Embedder-based RAG)和OpenAI Responses API。
    图5:聚合问题上的答案召回率对比
  • 图5:对于要求完整性的穷举类问题,S-RAG的召回率(Answer Recall)接近完美(1.0),远超其他方法。

    下表提供了更详细的数值结果,展示了不同S-RAG变体(使用黄金标准模式或自动推断模式)与基线系统的对比。即使是模式需要自动推断的S-RAG,在HotelsWorld Cup上也表现出色。

System
Metric
FinanceBench-Agg
World Cup
Hotels
S-RAG-GoldSchemaAnswerComparison0.860.950.94

AnswerRecall0.880.970.96
S-RAG-InferredSchema
AnswerComparison
0.08
0.89
0.90

AnswerRecall
0.10
0.92
0.92
OpenAI-Responses
AnswerComparison
0.60
0.81
0.35

AnswerRecall
0.61
0.84
0.36
VectorRAG
AnswerComparison
0.62
0.80
0.44

AnswerRecall
0.67
0.81
0.45
FullCorpus
AnswerComparison
0.08
0.77
0.70

AnswerRecall
0.11
0.81
0.73
  • 表3: 各系统在聚合问题评估集上的详细结果。


  • • 一个直观的例子
    为了更具体地感受差异,请看下面这个来自World Cup数据集的例子。


Question
What is the average number of total goals scored across all World Cups in this dataset?
Expected Answer
The average number of total goals scored across all World Cups in this dataset is 119.59.
VectorRAG
...Based on the context, the total number of goals in the 1998 World Cup was 171. In the 2002 World Cup, it was 161... It seems I don't have enough data to calculate the average...
FullCorpus
I will calculate the average number of goals. The total goals are 70 + 84 + ... + 145 = 1188. There are 10 tournaments... The average is 118.8.
S-RAG
The average number of total goals scored across all World Cups in this dataset is 119.59.

表4: 不同系统对“世界杯平均总进球数”这一问题的回答示例。

可以看到,传统RAG由于上下文不完整,无法给出正确答案,而S-RAG则直接、准确地完成了计算。


演进与启示:混合模式与深层思考

S-RAG并非要完全取代传统RAG,二者结合的“混合模式”展现了更广阔的应用前景。

混合检索:精确性与灵活性的结合

对于同时包含结构化和非结构化查询要素的复杂问题,可以采用混合检索策略:

  1. 1. 精确筛选:首先,利用S-RAG的结构化查询能力,从海量文档中迅速定位到一小批高度相关的文档。
  2. 2. 深度理解:然后,在这个高质量、小范围的文档集上,再使用传统向量RAG进行深度的语义理解和答案生成。

这种“先精后广”的策略,兼顾了准确性与灵活性。在包含各类问题的完整FinanceBench测试集上,混合模式的S-RAG表现优于纯粹的向量RAG系统。

图6:混合RAG在金融基准测试中的表现图6:在完整的FinanceBench基准测试中,结合了结构化和向量检索的混合RAG(Maestro Hybrid RAG)表现最佳。
System
Answer Comparison
Answer Recall
HYBRID-S-RAG0.780.80
OpenAI-Responses
0.67
0.68
VectorRAG
0.64
0.69

表5: 在完整的FinanceBench评估集上的性能对比。

S-RAG带来的深层启示

S-RAG的成功,也为我们思考AI发展路径提供了两个重要启示:

  1. 1. 新旧技术的融合:LLM的强大能力并不意味着要抛弃所有传统技术。S-RAG证明,将LLM的自然语言处理能力与经过数十年验证的数据库技术相结合,可以创造出远超单一技术范式的强大系统。AI的进步在于智慧的融合,而非颠覆一切。
  2. 2. 重塑RAG的核心瓶颈:过去,许多研究聚焦于优化LLM的“生成(Generation)”环节。S-RAG则指出,对于分析类任务,真正的瓶颈在于“检索(Retrieval)”。通过将检索从“寻找相关文本”转变为“执行精确计算”,从根本上提升了系统的可靠性和确定性。

结论:迈向可信赖的企业智能

S-RAG的出现,标志着企业AI正从一个提供文本摘要和简单问答的辅助工具,向一个能够支撑严肃决策、可信赖的分析引擎进化。

  • • 可信赖与可审计:由于其核心推理基于可验证的数据库查询,S-RAG的输出不再是黑箱,为金融、法务等高风险行业的AI应用提供了信任基石。
  • • 规模化应用潜力:面对海量、复杂的专业语料库,S-RAG的自动化模式构建和数据提取能力,展现了强大的规模化应用潜力。

最终,通过将企业内部庞大、混乱的非结构化数据,转化为结构清晰、随时待命的决策引擎,S-RAG为企业智能化转型铺平了道路。这不仅是一次技术的革新,更是一场关于企业如何利用AI创造核心价值的深刻变革。

图7:Hotels数据集文档页面示例图7: 为测试S-RAG而创建的Hotels数据集中的一个文档页面示例。

 

53AI,企业落地大模型首选服务商

产品:场景落地咨询+大模型应用平台+行业解决方案

承诺:免费POC验证,效果达标后再合作。零风险落地应用大模型,已交付160+中大型企业

联系我们

售前咨询
186 6662 7370
预约演示
185 8882 0121

微信扫码

添加专属顾问

回到顶部

加载中...

扫码咨询

扫码登录
登录即表示您同意《53AI网站服务协议》
服务协议

欢迎您使用【53AI 官方网站】(以下简称“本网站”或“我们”)。本《会员服务协议》(以下简称“本协议”)是您(以下简称“会员”或“用户”)与【深圳市博思协创网络科技有限公司】之间关于注册、登录及使用本网站会员服务所订立的法律协议。

在您注册或登录前,请务必审慎阅读、充分理解各条款内容,特别是免除或限制责任的条款、知识产权条款、争议解决条款等。此类条款将以加粗形式提示您注意。 当您通过微信公众号授权、手机验证码验证或其他方式成功登录本网站时,即视为您已完全理解并同意接受本协议的全部内容。

一、 定义

本网站:指由【深圳市博思协创网络科技有限公司】运营的,域名为【53ai.com】的网站及相关移动端页面。

会员服务:指本网站向注册会员提供的知识库文章查阅、内容检索及其他相关增值服务。

知识库内容:指本网站发布的包括但不限于文字、图表、数据、研究报告、行业分析等数字化内容资源。

二、 账号注册与登录

登录方式:本网站支持以下登录方式,您可根据实际情况选择:

微信公众号授权登录:您同意将您的微信OpenID信息授权给本网站,用于创建或关联会员账号。

手机验证码登录:您需提供真实有效的手机号码,并通过短信验证码完成身份验证与登录/注册。

账号安全:您的账号仅限您本人使用,禁止赠与、借用、租用、转让或售卖。因您保管不善导致的账号被盗、密码泄露等损失,由您自行承担。

实名认证:根据相关法律法规要求,我们可能要求您在特定功能下完成实名认证。如您拒绝提供,可能无法使用部分或全部服务。

未成年人保护:若您未满18周岁,请在法定监护人的陪同下阅读本协议,并在征得监护人同意后使用本服务。

三、 服务内容与规范

知识库查阅权限:会员登录后,有权按照其会员等级对应的权限范围,在线浏览、检索本网站知识库中的相关文章及内容。

服务变更:我们有权根据业务发展需要,调整、变更或终止部分服务内容,并将以网站公告、公众号消息等方式提前通知。

禁止行为:您在使用服务时不得实施以下行为:

利用技术手段批量爬取、下载、转存知识库内容;

将知识库内容用于商业目的或未经授权地向第三方传播;

干扰本网站正常运行或侵犯其他用户合法权益;

发布违法违规信息或从事违反公序良俗的活动。

四、 知识产权声明

权利归属:本网站知识库中的排版设计、软件代码等内容的知识产权均归【公司全称】或原权利人所有,受《中华人民共和国著作权法》等法律保护。

有限许可:本网站授予会员一项非独占、不可转让、不可转授权的普通许可,仅限于个人学习、研究之目的在线查阅知识库内容。

侵权追责:未经书面许可,任何单位或个人不得以任何形式复制、转载、摘编、镜像、汇编或以其他方式使用上述内容。一经发现,我们保留追究其法律责任的权利。

五、 个人信息保护

我们重视对您个人信息的保护。关于我们如何收集、使用、存储和保护您的个人信息,请单独阅读 《隐私政策》。

您通过微信公众号授权或手机号验证所提供的信息,我们将严格按照《个人信息保护法》的规定处理,仅用于身份识别、服务提供及安全验证等必要用途。

您可以随时通过网站设置或联系客服行使查阅、更正、删除个人信息及撤回授权同意的权利。

六、 免责声明

内容准确性:知识库内容仅供参考,不构成专业建议。我们不对其完整性、准确性、时效性作任何明示或暗示的保证,您应自行判断并承担使用风险。

不可抗力:因自然灾害、政策法规变化、网络故障、第三方平台接口异常(如微信接口维护、运营商短信通道故障)等不可抗力导致的服务中断或延迟,我们不承担违约责任。

第三方链接:本网站可能包含指向第三方网站的链接,该等网站的内容和服务不受我们控制,请您自行甄别风险。

七、 违约责任

如您违反本协议约定,我们有权视情节采取警告、限制功能、暂停服务、注销账号等措施,并保留要求赔偿损失的权利。

如因您的违约行为导致我们遭受行政处罚、第三方索赔或商誉损失,您应承担全部赔偿责任(包括但不限于罚款、赔偿金、律师费、公证费等)。

八、 法律适用与争议解决

本协议的订立、执行和解释均适用中华人民共和国大陆地区法律。

因本协议产生的或与本协议有关的任何争议,双方应友好协商解决;协商不成的,任何一方均可向【公司所在地】有管辖权的人民法院提起诉讼。

九、 其他

本协议构成双方就本服务达成的完整协议,取代此前任何口头或书面约定。

本协议任一条款被认定为无效或不可执行的,不影响其他条款的效力。

我们对本协议享有最终解释权,并在法律允许的范围内保留随时修改的权利。修改后的协议一经公布即生效,继续使用服务即视为同意修订内容。


已查阅