2026年7月23日 周四晚上19:30,报名腾讯会议了解“如何构建自进化的动态知识库(Brain)”(限30人)
免费POC, 零成本试错
FDE知识库

FDE知识库

学习大模型的前沿技术与行业落地应用


收藏

一篇文章讲清楚 AI Agent:从 Token、RAG、Skill 到 MCP、SDD 和 Harness 工程

发布日期:2026-06-04 08:39:32 浏览次数: 1815
作者:霍格沃兹软件测试开发

微信搜一搜,关注“霍格沃兹软件测试开发”

推荐语

从测试开发视角拆解AI Agent工程化难题,助你从Demo走向真实项目。

核心内容:
1. AI Agent与普通大模型的本质区别
2. Agent工程化的核心挑战与关键技术
3. 测试开发切入Agent的实战路径与工程框架

杨芳贤
53AI创始人/腾讯云(TVP)最具价值专家


很多测试开发同学现在都在学 AI Agent。

一开始看 Demo,感觉确实很厉害:

能查资料,能写代码,能生成测试用例,能调用工具,甚至还能自动分析日志。

但真放到企业项目里,问题很快就来了。

需求文档很长,Agent 到底该看哪一段? 接口文档经常变,它怎么保证不乱猜? 生成的用例看起来很完整,实际能不能跑? 自动调用工具时,权限边界怎么控制? 它写错代码、误改逻辑、生成错误报告,谁来兜底? Token 消耗越来越高,怎么避免越用越贵?

这也是很多 Agent 项目卡住的原因。

不是 Demo 做不出来,而是 Demo 很难稳定进入真实工程流程。

对测试开发来说,理解 Agent 不能只看“它会不会回答问题”,更要看它能不能完成一条可靠的任务闭环。

比如:

从需求里识别测试点, 从接口文档里生成用例, 调用自动化框架执行, 根据执行结果分析失败原因, 最后输出可追踪、可验证的报告。

这才是测试开发真正关心的 Agent。

所以这篇文章不会一上来堆概念,而是从测试开发的工作场景出发,把 Agent 背后的工程逻辑拆开讲清楚。


阅读目录

  • 一、先看清楚:Agent 和普通大模型有什么区别
  • 二、Token:为什么 Agent 用着用着就变贵、变慢、变不稳
  • 三、RAG:为什么企业 Agent 不能只靠模型自己回答
  • 四、Memory:Agent 如何记住当前任务和历史经验
  • 五、Skill:把测试经验封装成可复用能力
  • 六、ReAct:让 Agent 边想、边做、边验证
  • 七、MCP:让 Agent 更标准地连接外部工具
  • 八、SDD:先写清规格,再让 AI 干活
  • 九、Harness 工程:给 Agent 搭一个可控的工作环境
  • 十、把这些概念串起来:Agent 的完整工程链路
  • 十一、测试开发同学应该怎么切入 Agent
  • 十二、最后:Agent 工程能力的延伸

一、先看清楚:Agent 和普通大模型有什么区别

普通大模型更像“问一句,答一句”。

你问它一个问题,它生成一段回答。

但 Agent 不只是回答问题,它更像一个可以围绕目标持续推进的任务执行单元。

它会理解目标,拆解任务,获取上下文,调用工具,观察结果,再继续修正下一步。

先用一张图看懂 Agent 的基本工作方式。

这个闭环非常关键。

因为测试开发工作本身也是闭环型工作:

需求分析、测试设计、自动化执行、结果校验、缺陷定位、报告输出。

所以测试开发场景天然适合 Agent 化。

举个例子。

如果你让普通大模型生成接口测试用例,它可能直接给你一批文本。

但如果是一个真正的测试 Agent,它应该可以这样工作:


这就从“生成内容”变成了“执行任务”。

Agent 对测试开发的价值,不是替你写几行代码,而是把多个测试动作串成一条可执行的工程链路。


二、Token:为什么 Agent 用着用着就变贵、变慢、变不稳

很多人刚开始用大模型时,对 Token 没什么感觉。

但只要开始做 Agent,就一定会遇到 Token 问题。

Token 可以理解为大模型处理文本时的最小计算单位。

大模型不是直接理解中文、英文和代码,而是先把文本切成 Token,再映射成数字,然后进行计算。

Token 对 Agent 的影响主要有三个。

1. 影响成本

输入越长,输出越多,Token 消耗越高。

Agent 如果每次都把需求文档、接口文档、历史日志、代码片段全部塞给模型,成本很快就会上去。

2. 影响上下文

模型一次能处理的上下文是有限的。

如果资料太多,模型只能看到其中一部分。

这就会导致一个问题: 它看起来在回答完整问题,实际上只基于部分信息在判断。

3. 影响稳定性

Agent 是多轮执行的。

它会不断积累用户目标、任务步骤、工具返回结果、历史对话和中间分析。

如果不做上下文管理,Agent 很容易越跑越长、越跑越贵、越跑越偏。

所以,做 Agent 不能简单粗暴地把所有资料都塞进去。

更合理的方式应该是这样:


对测试开发来说,Token 管理不是一个底层细节,而是 Agent 能不能稳定落地的基础。

如果上下文控制不好,后面的 RAG、工具调用、报告生成都会受到影响。


三、RAG:为什么企业 Agent 不能只靠模型自己回答

测试开发场景有一个特点:

很多关键知识都不在大模型里面,而在企业自己的系统里。

比如:

  • 需求文档
  • 接口文档
  • 测试用例库
  • 缺陷记录
  • 日志规范
  • 数据字典
  • 测试平台说明
  • 历史事故复盘
  • 团队自动化框架约定

如果 Agent 不接这些资料,只靠模型自己回答,就很容易出现“看起来合理,实际上不准确”的问题。

这时候就需要 RAG。

RAG 的作用很简单:

在大模型回答之前,先去查资料,再结合资料生成回答。


这就像让模型从闭卷考试变成开卷考试。

对测试开发来说,RAG 可以用在很多场景。

测试资产
Agent 可以做什么
需求文档
生成测试点、识别风险
接口文档
生成接口用例和断言
测试用例库
复用历史测试设计
缺陷记录
分析高频问题和回归重点
日志规范
辅助定位问题
数据字典
理解字段含义
测试平台文档
指导 Agent 调用平台能力

但 RAG 不是把文档扔进向量库就完事。

真正落地时,必须考虑:


这里面任何一个环节没做好,RAG 都可能变成“看似接了知识库,实际回答还是靠猜”。

所以企业 Agent 想要靠谱,RAG 是绕不过去的一步。


四、Memory:Agent 如何记住当前任务和历史经验

Agent 要完成复杂任务,就不能每一步都像第一次执行一样。

它需要记住当前任务的状态,也需要在合适的时候复用历史经验。

所以 Agent 的记忆通常可以分成两类:

短期记忆和长期记忆。


短期记忆主要服务当前任务。

比如用户刚才说了什么,当前执行到哪一步,工具返回了什么结果,下一步应该怎么做。

长期记忆主要服务跨任务复用。

比如某个项目的接口命名习惯,某个团队的自动化框架规范,某类报错的排查路径,某种测试报告的输出格式。

对测试开发来说,长期记忆很适合沉淀这些内容:

  • 项目常见缺陷模式
  • 接口自动化框架约定
  • 页面元素定位规则
  • 测试报告输出格式
  • 常见环境问题排查路径
  • 历史线上事故复盘经验
  • 团队常用测试设计模板

不过,记忆不是越多越好。

错误经验会污染后续判断。 过期规则会导致 Agent 误判。 敏感信息不能随意写入长期记忆。 不同项目之间的经验也不能随便串用。

所以企业级 Agent 的记忆系统,一定要有更新、过期、权限和审计机制。


五、Skill:把测试经验封装成可复用能力

很多测试开发团队的问题不是没有经验,而是经验太分散。

有些在老员工脑子里。 有些在项目文档里。 有些在自动化脚本里。 有些在测试平台说明里。 有些在一次次踩坑里。

如果这些经验不能被结构化沉淀,Agent 每次做任务都要重新理解。

这时候就需要 Skill。

Skill 可以理解为面向大模型的能力封装。

它不是简单的一段 Prompt,而是一组结构化资料、流程、模板和工具。


比如一个接口测试 Skill,可以包含:


这样 Agent 在生成接口用例时,就不是随便发挥,而是按照团队规范执行。

Skill 的价值不是让模型凭空变聪明,而是把团队经验变成可复用资产。

测试开发团队非常适合做 Skill。

因为测试工作里有大量流程化、模板化、规范化的经验,比如:

  • 需求评审 Skill
  • 接口测试 Skill
  • Web 自动化 Skill
  • App 自动化 Skill
  • 性能分析 Skill
  • 日志分析 Skill
  • 缺陷定位 Skill
  • 测试报告 Skill
  • 代码评审 Skill
  • 测试平台操作 Skill

未来一个成熟的测试 Agent,不应该只是接一个大模型,而应该沉淀一组团队自己的测试 Skill。


六、ReAct:让 Agent 边想、边做、边验证

Agent 不是一次性生成答案就结束。

很多任务需要边执行边观察结果,再决定下一步。

这就是 ReAct 的价值。

ReAct 是 Reason 和 Act 的组合。

Reason 是推理。 Act 是行动。

它描述的是 Agent 的一种典型工作方式:

先分析当前信息是否足够, 如果不够,就调用工具, 拿到结果后继续判断, 再决定下一步动作。

这个模式和测试开发排查问题很像。

比如接口自动化失败后,测试开发通常不会直接下结论,而是会一步步排查。


Agent 也是类似逻辑。

它不能只靠一次回答完成复杂任务,而是要不断观察结果,再决定下一步。

不过 ReAct 也必须有边界。

否则 Agent 可能会陷入无效循环:

反复调用同一个工具, 反复分析同一段日志, 反复生成没有依据的猜测。

所以工程上需要控制:

  • 最多执行多少轮
  • 哪些工具可以调用
  • 工具失败后怎么降级
  • 什么时候停止
  • 什么时候交给人工处理
  • 高风险操作是否需要确认

Agent 越自主,越需要边界



七、MCP:让 Agent 更标准地连接外部工具

一个 Agent 如果不能连接外部系统,它的能力会非常有限。

测试开发场景里,Agent 往往需要连接很多工具:

需求系统、接口文档、数据库、日志平台、Git 仓库、CI/CD、自动化框架、缺陷管理系统。

过去如果要接这些工具,通常需要每个工具单独适配。

这会带来几个问题:

接入成本高。 协议不统一。 上下文格式不统一。 权限控制难统一。 不同 AI 应用之间复用困难。

MCP 的价值,就是让 AI 应用用一种更标准的方式连接外部工具和数据源。


对测试开发来说,MCP 很有想象空间。

未来一个测试 Agent 可以这样工作:


这意味着 Agent 不只是“知道怎么说”,还能知道:

去哪查资料, 调用什么工具, 拿什么结果回来, 下一步怎么处理。

这是 Agent 从 Demo 走向工程系统的关键一步。


八、SDD:先写清规格,再让 AI 干活

很多人用 AI 写代码时,容易犯一个错误:

直接给一句模糊需求,然后期待 AI 自动理解所有上下文。

比如:

帮我优化一下测试报告功能。

这句话对 AI 来说太宽泛。

它不知道你要优化哪里。 不知道哪些逻辑不能动。 不知道旧数据要不要兼容。 不知道接口返回能不能改。 不知道验收标准是什么。

这时候就需要 SDD。

SDD 是 Spec-Driven Development,中文可以叫规格驱动开发。

它强调在正式开发之前,先把目标、范围、约束、行为和验收标准写清楚,再让 AI 按规格执行。


比如同样是优化测试报告,更好的规格应该这样写:

规格项
示例
目标
增加失败用例聚合分析
范围
只改报告展示层,不修改执行逻辑
数据
使用现有执行结果表
兼容性
旧报告链接仍可访问
异常处理
无失败用例时展示空状态
验收标准
本地测试通过,报告字段完整

SDD 对测试开发非常重要。

因为测试开发同学未来不只是写脚本,还要会给 AI 写清楚规格。

适合使用 SDD 的场景包括:

  • 测试方案设计
  • 自动化用例生成
  • 测试平台功能改造
  • Agent 工作流设计
  • AI 生成代码的验收约束
  • 测试工具重构

谁能把需求讲清楚,谁就更能驾驭 AI。


九、Harness 工程:给 Agent 搭一个可控的工作环境

Agent 一旦进入真实工程系统,就不只是生成文本了。

它可能读取文件。 可能查询数据库。 可能调用接口。 可能修改代码。 可能触发流水线。 可能创建缺陷。 可能生成报告。

这时候,只靠 Prompt 是不够的。

我们需要给 Agent 搭一个可靠、可控、可观测的工作环境。

这就是 Harness 工程。


Harness 工程要解决的问题非常现实。

问题
工程要求
它能访问哪些数据
权限控制
它能调用哪些工具
工具白名单
它能不能写入系统
操作分级
它执行失败怎么办
异常处理
它修改代码后怎么验证
自动化测试
它每一步是否可追踪
日志观测
它的成本是否可控
Token 和费用监控

这些事情,测试开发同学其实并不陌生。

我们做自动化测试平台、质量平台、性能平台时,也要考虑环境、权限、日志、报告、监控、回滚和稳定性。

Agent 工程并没有脱离传统工程规律。

它只是把大模型放进了工程系统里,所以对工程治理提出了更高要求。


十、把这些概念串起来:Agent 的完整工程链路

前面讲了很多概念。

但这些概念不是孤立存在的。

真正的 Agent 落地,需要把它们串成一条完整链路。


这张图说明了一件事:

Agent 不是单点能力,而是一套工程组合。

只会写 Prompt,做不出稳定 Agent。 只接知识库,也做不出稳定 Agent。 只会调用工具,还是做不出稳定 Agent。

真正能落地的 Agent,一定要同时考虑:

  • 上下文
  • 知识
  • 工具
  • 权限
  • 验证
  • 日志
  • 成本
  • 反馈闭环

这也是测试开发同学应该重点关注的地方。

我们不是只看 AI 能不能生成内容,而是要看它能不能进入工程流程,并且稳定、可控、可验证地完成任务。


十一、测试开发同学应该怎么切入 Agent

对测试开发来说,Agent 不是一个遥远概念。

它已经开始影响很多具体工作。

未来很多测试任务都会从“人手工写脚本”,变成“人定义目标和规则,Agent 执行并反馈”。


测试开发同学可以从几个方向切入。

1. 从 RAG 切入

先把需求文档、接口文档、测试用例、缺陷记录接入知识库。

让 Agent 能基于真实资料回答,而不是凭空猜。

2. 从 Skill 切入

把团队已有的测试经验整理成 Skill。

比如接口测试规范、自动化脚本模板、日志分析流程、测试报告模板。

3. 从工具调用切入

让 Agent 能调用真实工具。

比如接口测试框架、浏览器自动化、日志查询、CI/CD、缺陷系统。

4. 从 SDD 切入

把模糊需求变成清晰规格。

让 AI 按照明确目标、范围、约束和验收标准执行。

5. 从 Harness 切入

建立权限、日志、沙箱、验证和人工审核机制。

让 Agent 不只是能跑,还要能控、能查、能回滚。

测试开发同学不能只停留在“会用 AI 工具”。

更重要的是理解 Agent 背后的工程结构。

你要知道:

  • 什么时候该用 RAG
  • 什么时候该封装 Skill
  • 什么时候需要 MCP 接工具
  • 什么时候必须加人工审核
  • 什么时候要做沙箱验证
  • 什么时候要写 SDD 规格
  • 什么时候不能让 Agent 自动执行

普通用户关心 AI 能不能给答案。

测试开发更应该关心:

  • 这个答案有没有依据
  • 能不能验证
  • 能不能复用
  • 能不能接入工具
  • 能不能稳定跑在工程系统里

这才是测试开发和普通使用者的差别。


十二、最后:Agent工程能力的延伸

很多人刚接触 Agent,会被各种名词吓到。

Token、RAG、Skill、MCP、Memory、ReAct、SDD、Harness……

但换成测试开发熟悉的语言,其实可以这样理解:

概念
测试开发视角
Token
成本和上下文边界
RAG
让 Agent 查资料
Memory
记住任务上下文和历史经验
Skill
封装团队测试能力
ReAct
边执行边观察结果
MCP
标准化连接工具和系统
SDD
先写清规格再让 AI 干活
Harness
给 Agent 搭可控工程环境
验证机制
保证结果可信

Agent 最终拼的不是一个炫酷 Demo,而是能不能在真实业务里稳定工作。

对测试开发来说,这反而是机会。

因为我们本来就懂流程、懂质量、懂自动化、懂验证、懂工程闭环。

AI Agent 时代,测试开发不只是工具使用者,也可以成为 Agent 工程落地的重要建设者。

真正的分水岭,不是会不会问 AI。

而是你能不能把 AI 放进真实工程流程里,让它稳定、可控、可验证地完成任务。

这个版本的开头会更有“读者痛点”,但不会过早把核心概念都解释完,读者会更愿意往下看。

53AI,企业落地大模型首选服务商

产品:场景落地咨询+大模型应用平台+行业解决方案

承诺:免费POC验证,效果达标后再合作。零风险落地应用大模型,已交付160+中大型企业

联系我们

售前咨询
186 6662 7370
预约演示
185 8882 0121

微信扫码

添加专属顾问

回到顶部

加载中...

扫码咨询

扫码登录
登录即表示您同意《53AI网站服务协议》
服务协议

欢迎您使用【53AI 官方网站】(以下简称“本网站”或“我们”)。本《会员服务协议》(以下简称“本协议”)是您(以下简称“会员”或“用户”)与【深圳市博思协创网络科技有限公司】之间关于注册、登录及使用本网站会员服务所订立的法律协议。

在您注册或登录前,请务必审慎阅读、充分理解各条款内容,特别是免除或限制责任的条款、知识产权条款、争议解决条款等。此类条款将以加粗形式提示您注意。 当您通过微信公众号授权、手机验证码验证或其他方式成功登录本网站时,即视为您已完全理解并同意接受本协议的全部内容。

一、 定义

本网站:指由【深圳市博思协创网络科技有限公司】运营的,域名为【53ai.com】的网站及相关移动端页面。

会员服务:指本网站向注册会员提供的知识库文章查阅、内容检索及其他相关增值服务。

知识库内容:指本网站发布的包括但不限于文字、图表、数据、研究报告、行业分析等数字化内容资源。

二、 账号注册与登录

登录方式:本网站支持以下登录方式,您可根据实际情况选择:

微信公众号授权登录:您同意将您的微信OpenID信息授权给本网站,用于创建或关联会员账号。

手机验证码登录:您需提供真实有效的手机号码,并通过短信验证码完成身份验证与登录/注册。

账号安全:您的账号仅限您本人使用,禁止赠与、借用、租用、转让或售卖。因您保管不善导致的账号被盗、密码泄露等损失,由您自行承担。

实名认证:根据相关法律法规要求,我们可能要求您在特定功能下完成实名认证。如您拒绝提供,可能无法使用部分或全部服务。

未成年人保护:若您未满18周岁,请在法定监护人的陪同下阅读本协议,并在征得监护人同意后使用本服务。

三、 服务内容与规范

知识库查阅权限:会员登录后,有权按照其会员等级对应的权限范围,在线浏览、检索本网站知识库中的相关文章及内容。

服务变更:我们有权根据业务发展需要,调整、变更或终止部分服务内容,并将以网站公告、公众号消息等方式提前通知。

禁止行为:您在使用服务时不得实施以下行为:

利用技术手段批量爬取、下载、转存知识库内容;

将知识库内容用于商业目的或未经授权地向第三方传播;

干扰本网站正常运行或侵犯其他用户合法权益;

发布违法违规信息或从事违反公序良俗的活动。

四、 知识产权声明

权利归属:本网站知识库中的排版设计、软件代码等内容的知识产权均归【公司全称】或原权利人所有,受《中华人民共和国著作权法》等法律保护。

有限许可:本网站授予会员一项非独占、不可转让、不可转授权的普通许可,仅限于个人学习、研究之目的在线查阅知识库内容。

侵权追责:未经书面许可,任何单位或个人不得以任何形式复制、转载、摘编、镜像、汇编或以其他方式使用上述内容。一经发现,我们保留追究其法律责任的权利。

五、 个人信息保护

我们重视对您个人信息的保护。关于我们如何收集、使用、存储和保护您的个人信息,请单独阅读 《隐私政策》。

您通过微信公众号授权或手机号验证所提供的信息,我们将严格按照《个人信息保护法》的规定处理,仅用于身份识别、服务提供及安全验证等必要用途。

您可以随时通过网站设置或联系客服行使查阅、更正、删除个人信息及撤回授权同意的权利。

六、 免责声明

内容准确性:知识库内容仅供参考,不构成专业建议。我们不对其完整性、准确性、时效性作任何明示或暗示的保证,您应自行判断并承担使用风险。

不可抗力:因自然灾害、政策法规变化、网络故障、第三方平台接口异常(如微信接口维护、运营商短信通道故障)等不可抗力导致的服务中断或延迟,我们不承担违约责任。

第三方链接:本网站可能包含指向第三方网站的链接,该等网站的内容和服务不受我们控制,请您自行甄别风险。

七、 违约责任

如您违反本协议约定,我们有权视情节采取警告、限制功能、暂停服务、注销账号等措施,并保留要求赔偿损失的权利。

如因您的违约行为导致我们遭受行政处罚、第三方索赔或商誉损失,您应承担全部赔偿责任(包括但不限于罚款、赔偿金、律师费、公证费等)。

八、 法律适用与争议解决

本协议的订立、执行和解释均适用中华人民共和国大陆地区法律。

因本协议产生的或与本协议有关的任何争议,双方应友好协商解决;协商不成的,任何一方均可向【公司所在地】有管辖权的人民法院提起诉讼。

九、 其他

本协议构成双方就本服务达成的完整协议,取代此前任何口头或书面约定。

本协议任一条款被认定为无效或不可执行的,不影响其他条款的效力。

我们对本协议享有最终解释权,并在法律允许的范围内保留随时修改的权利。修改后的协议一经公布即生效,继续使用服务即视为同意修订内容。


已查阅