2026年7月2日 周四晚上19:30,报名腾讯会议了解“如何构建自进化的动态知识库(Brain)”(限30人)
免费POC, 零成本试错
FDE知识库

FDE知识库

学习大模型的前沿技术与行业落地应用


收藏

LangChain实战 | OutputParser:让大模型输出从 “鸡肋” 变 “瑰宝” 的关键!

发布日期:2025-01-22 07:20:13 浏览次数: 3461
作者:AI取经路

微信搜一搜,关注“AI取经路”

推荐语

这是关于 LangChain 中 OutputParser 的绝佳实战指南,没有之一。

核心内容:
1. 输出解析器的定义与作用
2. OutputParser 的用途介绍
3. 以 JSON 格式返回的实例讲解

杨芳贤
53AI创始人/腾讯云(TVP)最具价值专家


-正文-

LangChain 的 OutputParser 是一种强大工具,用于将大模型的原始输出转换为结构化、可操作的数据格式,如 JSON 或 Python 对象。本文介绍了 OutputParser 的核心功能、应用场景及其在实际业务中的实现方法,包括使用 JsonOutputParser 和 Pydantic 定义数据结构,从而高效格式化输出内容以满足业务需求。

  • 1. 什么是输出解析器(OutputParser)?
  • 2. OutputParser的用途是什么?
  • 3. 例子:大模型返回响应后,以JSON格式返回给客户端(JsonOutputParser)
    • 3.1 引入相关的包
    • 3.2 定义模型
    • 3.3 定义解析器
    • 3.4 定义提示词(指导怎么格式化输出)
    • 3.5 调用大模型生成格式化输出
    • 3.6 在返回给用户前,增加其他业务数据
    • 3.7 最终的json数据
    • 3.8 运行日志

1. 什么是输出解析器(OutputParser)? 

在大模型应用中,原始输出通常只是处理的开端,尽管这些输出能够提供很好的内容,但是根据下游使用场景,语言模型生成的原始文本很大概率需要被进一步处理才能使用。

输出解析器(OutputParser)是 LangChain 中的一种工具,用于帮助将语言模型的文本响应转化为实用的格式化输出。

2. OutputParser的用途是什么? 

输出解析器有两个主要用途:

  1. 将非结构化文本转换为结构化数据。例如,将文本解析为 JSON 或 Python 对象。
  2. 向提示词注入指令,指导语言模型如何格式化响应。解析器可以提供一个 get_format_instructions() 方法,该方法会返回用于提示格式化文本的指令。

3. 例子:大模型返回响应后,以JSON格式返回给客户端(JsonOutputParser) 

我们需要大模型生成一个小说,内容以json返回,在这个基础上,增加一些其他业务数据后,给客户端以json格式返回:

{
  作者:"xx",
  年龄:"80",
  标题:"xxx",
  摘要:"xxxx",
  正文:"xxxxxx",
}

3.1 引入相关的包

import os  # 导入操作系统模块
import json  # 导入json模块

os.environ['OpenAI_API_KEY'] = 'hk-iwtb91e427'  # 设置OpenAI API密钥

from langchain_core.output_parsers import PydanticOutputParser, JsonOutputParser
from langchain_core.prompts import PromptTemplate
from langchain_openai import OpenAI, ChatOpenAI
from pydantic import BaseModel, Field, model_validator

3.2 定义模型

model = ChatOpenAI(  # 创建ChatOpenAI的实例
    model="gpt-4o-mini",  # 指定模型
    temperature=0,  # 设置温度
    base_url="https://api.openai-hk.com/v1"  # 设置基础URL
)

3.3 定义解析器

使用pydantic定义所需的数据结构,和基本的格式校验逻辑,并作为JsonOutputParser的参数

# 使用pydantic定义所需的数据结构
class Story(BaseModel):# 创建Story类,继承自BaseModel
    title: str = Field(description="标题")  # 科幻小说的标题
    summary: str = Field(description="摘要")  # 科幻小说的摘要
    content: str = Field(description="正文")  # 科幻小说的正文

    # 可以轻松添加自定义验证逻辑
    @model_validator(mode="before")  # 在模型验证之前进行验证
    @classmethod
    def validate_story(cls, values: dict) -> dict:# 定义验证方法
        # 这里可以添加对标题、摘要和正文的验证逻辑
        return values  # 返回验证后的值

# 设置解析器
parser = JsonOutputParser(pydantic_object=Story)  # 创建JsonOutputParser实例

3.4 定义提示词(指导怎么格式化输出)

解析器通过 get_format_instructions() 方法,返回用于提示的格式化文本指令,然后向提示注入指令,指导语言模型如何格式化响应(见运行日志)。

# 创建提示模板
prompt = PromptTemplate(  # 创建提示模板
    template="请按用户要求返回文章,包括标题、摘要和正文。\n{format_instructions}\n{query}\n",  # 模板内容
    input_variables=["query"],  # 输入变量
    partial_variables={"format_instructions": parser.get_format_instructions()},  # 部分变量
)

# 定义查询
story_query = "请给我一个100字的科幻小说。"# 查询内容

# 打印最终模板结果
final_template = prompt.format(format_instructions=parser.get_format_instructions(), query=story_query)  # 格式化最终模板
print("=================================提示词开始========================================")
print(final_template)  # 打印最终模板结果
print("=================================提示词结束========================================")

这是生成的指导提示词:

The output should be formatted as a JSON instance that conforms to the JSON schema below.

As an example, for the schema {"properties": {"foo": {"title""Foo""description""a list of strings""type""array""items": {"type""string"}}}, "required": ["foo"]}
the object {"foo": ["bar""baz"]} is a well-formatted instance of the schema. The object {"properties": {"foo": ["bar""baz"]}} is not well-formatted.

Here is the output schema:
```
{"properties": {"title": {"description""标题""title""Title""type""string"}, "summary": {"description""摘要""title""Summary""type""string"}, "content": {"description""正文""title""Content""type""string"}}, "required": ["title""summary""content"]}
```

3.5 调用大模型生成格式化输出

放到链的最后,用来格式化输出:output = prompt | model | parser

# 创建一个查询,旨在提示语言模型生成科幻小说
output = prompt | model | parser  # 将提示和模型结合
story_output = output.invoke({"query": story_query})  # 调用模型并传入查询
print("模型输出结果 :")
print(story_output)  # 打印输出
print()

3.6 在返回给用户前,增加其他业务数据

# 拼接作者和年龄信息
final_json = {
    "title": story_output['title'],
    "summary": story_output['summary'],
    "content": story_output['content'],
    "author""AI取经人",  # 作者
    "age"18  # 年龄
}

# 打印最终的 JSON 结果
print("最终的 JSON 结果:")
print(json.dumps(final_json, ensure_ascii=False, indent=4))  # 格式化打印JSON结果

3.7 最终的json数据

{
    "title""穿越时空的信号",
    "summary""在未来的某一天,科学家通过先进的量子技术接收到了来自20世纪的神秘信号。这一信号揭示了一段被遗忘的历史,改变了人类对时间的理解。",
    "content""当信号首次被接收时,整个实验室都陷入了震惊。信号中包含着关于平行宇宙的知识和未来人类的命运。科学家们决定通过量子隧道进行实验,试图与过去的自己交流。在这个过程中,他们不仅面对科技的诱惑,也直面人性的挣扎。最终,他们意识到,改变历史的代价是不可承受的,但真相仍旧摆在他们面前。",
    "author""AI取经人",
    "age"18
}

3.8 运行日志

53AI,企业落地大模型首选服务商

产品:场景落地咨询+大模型应用平台+行业解决方案

承诺:免费POC验证,效果达标后再合作。零风险落地应用大模型,已交付160+中大型企业

联系我们

售前咨询
186 6662 7370
预约演示
185 8882 0121

微信扫码

添加专属顾问

回到顶部

加载中...

扫码咨询

扫码登录
登录即表示您同意《53AI网站服务协议》
服务协议

欢迎您使用【53AI 官方网站】(以下简称“本网站”或“我们”)。本《会员服务协议》(以下简称“本协议”)是您(以下简称“会员”或“用户”)与【深圳市博思协创网络科技有限公司】之间关于注册、登录及使用本网站会员服务所订立的法律协议。

在您注册或登录前,请务必审慎阅读、充分理解各条款内容,特别是免除或限制责任的条款、知识产权条款、争议解决条款等。此类条款将以加粗形式提示您注意。 当您通过微信公众号授权、手机验证码验证或其他方式成功登录本网站时,即视为您已完全理解并同意接受本协议的全部内容。

一、 定义

本网站:指由【深圳市博思协创网络科技有限公司】运营的,域名为【53ai.com】的网站及相关移动端页面。

会员服务:指本网站向注册会员提供的知识库文章查阅、内容检索及其他相关增值服务。

知识库内容:指本网站发布的包括但不限于文字、图表、数据、研究报告、行业分析等数字化内容资源。

二、 账号注册与登录

登录方式:本网站支持以下登录方式,您可根据实际情况选择:

微信公众号授权登录:您同意将您的微信OpenID信息授权给本网站,用于创建或关联会员账号。

手机验证码登录:您需提供真实有效的手机号码,并通过短信验证码完成身份验证与登录/注册。

账号安全:您的账号仅限您本人使用,禁止赠与、借用、租用、转让或售卖。因您保管不善导致的账号被盗、密码泄露等损失,由您自行承担。

实名认证:根据相关法律法规要求,我们可能要求您在特定功能下完成实名认证。如您拒绝提供,可能无法使用部分或全部服务。

未成年人保护:若您未满18周岁,请在法定监护人的陪同下阅读本协议,并在征得监护人同意后使用本服务。

三、 服务内容与规范

知识库查阅权限:会员登录后,有权按照其会员等级对应的权限范围,在线浏览、检索本网站知识库中的相关文章及内容。

服务变更:我们有权根据业务发展需要,调整、变更或终止部分服务内容,并将以网站公告、公众号消息等方式提前通知。

禁止行为:您在使用服务时不得实施以下行为:

利用技术手段批量爬取、下载、转存知识库内容;

将知识库内容用于商业目的或未经授权地向第三方传播;

干扰本网站正常运行或侵犯其他用户合法权益;

发布违法违规信息或从事违反公序良俗的活动。

四、 知识产权声明

权利归属:本网站知识库中的排版设计、软件代码等内容的知识产权均归【公司全称】或原权利人所有,受《中华人民共和国著作权法》等法律保护。

有限许可:本网站授予会员一项非独占、不可转让、不可转授权的普通许可,仅限于个人学习、研究之目的在线查阅知识库内容。

侵权追责:未经书面许可,任何单位或个人不得以任何形式复制、转载、摘编、镜像、汇编或以其他方式使用上述内容。一经发现,我们保留追究其法律责任的权利。

五、 个人信息保护

我们重视对您个人信息的保护。关于我们如何收集、使用、存储和保护您的个人信息,请单独阅读 《隐私政策》。

您通过微信公众号授权或手机号验证所提供的信息,我们将严格按照《个人信息保护法》的规定处理,仅用于身份识别、服务提供及安全验证等必要用途。

您可以随时通过网站设置或联系客服行使查阅、更正、删除个人信息及撤回授权同意的权利。

六、 免责声明

内容准确性:知识库内容仅供参考,不构成专业建议。我们不对其完整性、准确性、时效性作任何明示或暗示的保证,您应自行判断并承担使用风险。

不可抗力:因自然灾害、政策法规变化、网络故障、第三方平台接口异常(如微信接口维护、运营商短信通道故障)等不可抗力导致的服务中断或延迟,我们不承担违约责任。

第三方链接:本网站可能包含指向第三方网站的链接,该等网站的内容和服务不受我们控制,请您自行甄别风险。

七、 违约责任

如您违反本协议约定,我们有权视情节采取警告、限制功能、暂停服务、注销账号等措施,并保留要求赔偿损失的权利。

如因您的违约行为导致我们遭受行政处罚、第三方索赔或商誉损失,您应承担全部赔偿责任(包括但不限于罚款、赔偿金、律师费、公证费等)。

八、 法律适用与争议解决

本协议的订立、执行和解释均适用中华人民共和国大陆地区法律。

因本协议产生的或与本协议有关的任何争议,双方应友好协商解决;协商不成的,任何一方均可向【公司所在地】有管辖权的人民法院提起诉讼。

九、 其他

本协议构成双方就本服务达成的完整协议,取代此前任何口头或书面约定。

本协议任一条款被认定为无效或不可执行的,不影响其他条款的效力。

我们对本协议享有最终解释权,并在法律允许的范围内保留随时修改的权利。修改后的协议一经公布即生效,继续使用服务即视为同意修订内容。


已查阅