微信扫码
添加专属顾问
我要投稿
AI领域的最新突破,OpenAI引领AI代理框架进入新时代。 核心内容: 1. TypeScript支持,AI开发新纪元 2. RealtimeAgent,实时语音交互新体验 3. 语音代理会话的可追溯性,提升审计效率 4. 语音交互模型优化,更自然流畅的交流
最近,AI领域的巨头OpenAI又给我们带来了一个重磅消息。他们在AI代理框架上进行了四项关键更新,这些更新不仅扩展了平台兼容性,还提升了对语音接口的支持,并且增强了可观察性。这些改进都是为了让AI代理更加实用、可控和可审计,以便更好地融入现实世界的各种应用场景,无论是客户端还是服务器端。
首先,OpenAI的Agents SDK现在支持TypeScript了!这意味着除了Python开发者之外,那些在JavaScript和Node.js环境中工作的开发者也可以轻松上手。TypeScript SDK与Python版本功能一致,包括以下几个关键组件:
这一更新让SDK与现代Web和云原生应用栈保持一致。开发者现在可以在前端(浏览器)和后端(Node.js)环境中使用统一的抽象来构建和部署代理。详细的文档可以在openai-agents-js找到。
OpenAI推出了一种新的RealtimeAgent抽象,专门用于支持对延迟敏感的语音应用。RealtimeAgent扩展了Agents SDK,增加了音频输入/输出、有状态交互和中断处理功能。
其中最值得关注的功能是Human-in-the-Loop(HITL,人在回路中)审批。这个功能允许开发者在运行时拦截代理的执行,序列化其状态,并在继续执行之前要求手动确认。这对于需要监督、合规检查点或特定领域验证的应用场景非常关键。
开发者可以暂停执行,检查序列化状态,并在保留完整上下文的情况下恢复代理。更多细节可以在OpenAI的HITL文档中找到。
与RealtimeAgent功能相辅相成的是,OpenAI扩展了Traces仪表板,增加了对语音代理会话的支持。现在,无论是通过SDK还是直接通过API调用发起的会话,都可以进行追踪。
Traces界面可以可视化以下内容:
这为基于文本和以音频为主的代理提供了统一的审计跟踪,简化了跨模态的调试、质量保证和性能调优。追踪格式标准化,并与OpenAI的监控栈集成,无需额外的监控工具即可提供全面的可见性。更多实现细节可以在语音代理指南中找到。
OpenAI对其底层的语音到语音模型进行了更新,这些模型是实时音频交互的核心。改进主要集中在减少延迟、提高自然度和更有效地处理中断。
虽然模型的核心功能——语音识别、合成和实时反馈——保持不变,但这些改进让对话系统在响应性和语调变化方面表现得更好。具体来说:
这些变化与OpenAI支持动态、多模态环境中运行的具身化和对话型代理的总体努力相一致。
这四项更新共同加强了构建语音支持、可追溯且对开发者友好的AI代理的基础。通过与TypeScript环境的深度集成,引入实时流程中的结构化控制点,以及增强可观察性和语音交互质量,OpenAI继续朝着更模块化和互操作性强的代理生态系统迈进。
这些更新不仅仅是技术上的进步,更是OpenAI在推动AI技术走向实用化、普及化道路上的重要一步。无论是开发者还是最终用户,都将从这些改进中受益。未来,OpenAI还会带来哪些惊喜?让我们拭目以待!
53AI,企业落地大模型首选服务商
产品:场景落地咨询+大模型应用平台+行业解决方案
承诺:免费场景POC验证,效果验证后签署服务协议。零风险落地应用大模型,已交付160+中大型企业
2025-06-06
Anthropic官方揭秘内部团队如何使用 Claude Code(附完整版手册)
2025-06-06
图像编辑模型SeedEdit 3.0发布!更强保持力,更高可用率
2025-06-05
如何构建AI Agent快速分析行业景气度
2025-06-05
MCP Server 之旅第 5 站:服务鉴权体系解密
2025-06-05
Cursor 1.0 正式发布!BugBot 自动代码审查,Background Agent 全面开放、MCP一键安装
2025-06-05
11张图全面总结 MCP、A2A、Function Calling 架构设计间关系
2025-06-05
一手实测地产首个Agent,实话说:不错!
2025-06-05
面向 Data+AI 的新一代数智开发平台
2024-08-13
2024-06-13
2024-08-21
2024-07-31
2024-09-23
2024-05-28
2024-08-04
2024-04-26
2024-07-09
2024-07-20
2025-06-05
2025-06-04
2025-06-04
2025-06-03
2025-06-02
2025-05-31
2025-05-29
2025-05-29