微信扫码
添加专属顾问
我要投稿
从提示词工程到上下文工程,探索如何高效管理LLM输入窗口以提升模型表现。 核心内容: 1. 上下文工程的定义与重要性 2. 多位AI开发者提出的实践解法框架 3. 上下文工程中的科学与艺术平衡
“上下文工程”指的是:系统性地设计、组织和动态管理大语言模型(LLM)输入窗口中的上下文信息,以确保模型在执行任务时具备最优表现的技术与艺术结合。
这一概念由 Cognition 的 Walden Yan 明确提出:
被 Shopify CEO Tobi Lutke 等多位 AI 实践者在社交媒体广泛转发,迅速走红。
如 Dex Horthy (数据平台 Hex 的联合创始人)所言:
“Own your context window.”
上下文窗口不断扩大(Claude 3.5 已到 200K,GPT-4o 是128K,GPT-4 Turbo是128K,Gemini 1.5甚至到达100万 token),但更大上下文≠更好效果。相反:
这就要求我们从 prompt 工程迈入 context 工程的新阶段。
以下是多位 AI 开发者对“Context Engineering”的具体定义与操作方法:
LangGraph 是为“上下文工程”而生的图状 RAG 框架,用于搭建带状态的、多轮交互式 Agent 应用。
https://x.com/hwchase17/status/1937648042985030145
“就像操作系统负责将关键数据调入 CPU 的 RAM 中一样,LLM 应用也需要上下文工程师管理 Prompt、检索内容与工具调用的组合逻辑。”
https://rlancemartin.github.io/2025/06/23/context_engineering/
对于语音 Agent 或任务代理,应该把对话流设计成状态机,每个状态只需要引入完成该任务的必要上下文。
https://gist.github.com/kwindla/f755284ef2b14730e1075c2ac803edcf
“上下文工程既是科学,也是艺术。”
https://x.com/karpathy/status/1937902205765607626
他列举了上下文组成的各种组件,包括:
最好的上下文工程需要在高性能、低延迟、低成本之间找到最佳点。
53AI,企业落地大模型首选服务商
产品:场景落地咨询+大模型应用平台+行业解决方案
承诺:免费POC验证,效果达标后再合作。零风险落地应用大模型,已交付160+中大型企业
2025-05-19
2025-06-27
2025-06-12
2025-06-21
2025-06-10
2025-07-03
2025-05-17
2025-06-03
2025-07-03
2025-05-16
2025-08-11
2025-08-10
2025-07-24
2025-07-22
2025-07-19
2025-07-08
2025-07-04
2025-06-23