我要投稿

DeepSeek API 升级，支持续写、FIM、Function Calling、JSON Output

发布日期：2024-07-26 15:10:28 浏览次数： 3661

今天，DeepSeek API 迎来更新，装备了新的接口功能，来释放模型的更多潜力：

更新接口 /chat/completions

JSON Output
Function Calling
对话前缀续写（Beta）
8K 最长输出（Beta)

新增接口 /completions

FIM 补全（Beta）

所有新功能，均可使用 deepseek-chat 和 deepseek-coder 模型调用。

更新接口 /chat/completions

1.JSON Output，增强内容格式

DeepSeek API 新增 JSON Output 功能，兼容 OpenAI API，能够强制模型输出 JSON 格式的字符串。

在进行数据处理等任务时，该功能可以让模型按预定格式返回 JSON，方便后续对模型输出内容进行解析，提高程序流程的自动化能力。

要使用 JSON Output 功能，需要：

设置response_format 参数为 {'type': 'json_object'}
用户需要在提示词中，指导模型输出 JSON 的格式，来确保输出格式符合预期
合理设置 max_tokens，防止 JSON 字符串被中途截断

以下为一个 JSON Output 功能的使用样例。在这个样例中，用户给出一段文本，模型对文本中的问题 & 答案进行格式化输出。

2. Function Calling，连接物理世界

DeepSeek API 新增 Function Calling 功能，兼容 OpenAI API，通过调用外部工具，来增强模型与物理世界交互的能力。

Function Calling 功能支持传入多个 Function（最多 128 个），支持并行 Function Calling。

下图展示了将 deepseek-coder 整合到开源大模型前端 LobeChat 的效果。在这个例子中，我们开启了“网站爬虫”插件，来实现对网站的爬取和总结。

下图展示了使用 Function Calling 功能的交互过程：

3. 对话前缀续写（Beta），更灵活的输出控制

对话前缀续写沿用了对话补全的 API 格式，允许用户指定最后一条 assistant 消息的前缀，来让模型按照该前缀进行补全。该功能也可用于输出长度达到 max_tokens 被截断后，将被截断的消息进行拼接，重新发送请求对被截断内容进行续写。

要使用对话前缀续写功能，需要：

设置 base_url 为
https://api.deepseek.com/beta 来开启 Beta 功能
确保 messages 列表里最后一条消息的 role 为 assistant，并设置最后一条消息的 prefix 参数为 True，
如：{"role": "assistant": "content": "在很久很久以前，", "prefix": True}

以下为对话前缀续写功能的使用样例。在这个例子里，设置了 assistant 消息开头为 '```python\n'，以强制其以代码块开始，并设置 stop 参数为 '```'，让模型不输出多余的内容。

4. 8K 最长输出（Beta），释放更长可能

为了满足更长文本输出的场景，我们在 Beta 版 API 中，将 max_tokens 参数的上限调整为 8K。

要提高到 8K 最长输出，需要：

设置 base_url 为
https://api.deepseek.com/beta 来开启 Beta 功能
max_tokens 默认为 4096。开启 Beta 功能后，max_tokens 最大可设置为 8192

新增接口 /completions

1.FIM 补全（Beta），使能续写场景

DeepSeek API 新增 FIM补全接口，兼容 OpenAI 的 FIM 补全 API，允许用户提供自定义的前缀/后缀（可选），让模型进行内容补全。该功能常用于故事续写、代码补全等场景。FIM 补全接口收费与对话补全相同。

要使用 FIM 补全接口，需要设置 base_url 为 https://api.deepseek.com/beta 来开启 Beta 功能。

以下为 FIM 补全接口的使用样例。在这个例子中，用户提供斐波那契数列函数的开头和结尾，模型对中间内容进行补全。

53AI，企业落地大模型首选服务商

产品：场景落地咨询+大模型应用平台+行业解决方案

承诺：免费POC验证，效果达标后再合作。零风险落地应用大模型，已交付160+中大型企业

相关资讯

2025-07-30

WAIC-Day3: 谈谈Agent场景及Agent OS基础设施

2025-07-30

微软进军 AI 浏览器，维持巨头的平庸

2025-07-30

Higress ，助力企业构建私有 AI 网关和 MCP 市场

2025-07-30

刚刚，OpenAI给大学生做了个新外挂！ChatGPT一键变老师，免费可用

2025-07-30

突发！字节跳动发布同声传译大模型Seed LiveInterpret2.0，是首个延迟与准确率接近人类水平的中英语音同传系统！

2025-07-30

OpenAI深夜发布ChatGPT Study：免费AI家教，彻底颠覆传统教育

2025-07-29

AI+合同审查落地分享（下-1- 合同智能审查）

2025-07-29

AI 应用开发，还需要意图识别吗？

了解更多

了解更多

160+中大型企业正在使用53AI

立即咨询预约演示

把握AI发展的机遇，共同探索、共同进步

2025-01-22

如何打造基于GenAI的员工服务机器人

2025-01-22

热点资讯

DeepSeek R1-0528 小版本升级

2025-05-29

高效 Agents 构建指南

2025-05-23

SpringAI Alibaba实战文生图、聊天记忆功能

2025-06-01

忽视小模型和知识库，企业AI应用必将是死路一条

2025-05-07

从RAG到CoT再到MCP，一文读懂AI Agent落地难题｜大模型研究

2025-05-07

CAG 与 RAG：哪种方法能带来性能更好的人工智能

2025-05-07

AIGC合规落地全景图 | 如何做好AIGC数据合规

2025-06-07

精|知识探索新范式：深度研究Deep Research智能体全面综述，系统、方法与应用

2025-06-21

别再被MCP协议绕晕！一文搞懂连接流程与核心架构

2025-06-12

OpenAI创始人红衫AI峰会最新爆论：AI创业者，想活命就别再跟老子卷大模型了！

2025-05-20

大家都在问

AI 应用开发，还需要意图识别吗？

2025-07-29

AI还有哪些机会？你是否适合切入？

2025-07-29

Cursor Meetup 杭州站分享实录：小团队如何用 AI 撑起万级日活产品？

2025-07-28

独家｜对话夸克AI眼镜宋刚：如何把整个阿里巴巴塞进一副眼镜里？

2025-07-27

如何用 AI 翻译实现文档多语言支持的周级敏捷响应？

2025-07-27

面向 AI Agent 的搜索服务，小宿科技有机会成为百亿美金的新巨头吗？

2025-07-25

AI 基础知识从 0.3 到 0.4——如何选对深度学习模型？

2025-07-24

任务紧急，CodeBuddy是如何成为“第二双手”的？

2025-07-24

热门标签

内容创作大模型技术个人提效 langchain llamaindex 多模态技术 RAG技术智能客服知识图谱模型微调 RAGFlow coze Dify Fastgpt Bisheng Qanything AI+汽车 AI+金融 AI+工业 AI+培训 AI+SaaS 提示词框架提示词技巧 AI+电商 AI面试数字员工 ChatBI 知识管理开源大模型智能营销智能硬件智能化改造 AI+医疗 MaxKB

应聘简历请发送至： ceo@53ai.com

友情链接：

CopyRight © 2012-2024 深圳市博思协创网络科技有限公司版权所有

粤ICP备14082021号

广州：广州市华景路37号(华景软件园)暨南大学科技大厦6楼（整层）

深圳：深圳市福田区泰然四路29号天安创新科技广场一期A座1204

上海：上海市浦东新区金新路58号1602室

微信扫码
和创始人交个朋友

联系我们

售前咨询

预约演示

微信扫码

添加专属顾问

回到顶部