我要投稿

提示词生成comfyui工作流来了! (英伟达整花活, 把comfyui的门槛打下来!

发布日期：2024-10-22 06:16:43 浏览次数： 3001

作者：WayToAGI Agent探索

微信搜一搜，关注“WayToAGI Agent探索”

在多次社区的Comfyui共学中发现, comfyui工作流的门槛确实过高. 让很多人理解“潜空间”, “Vae”, “LoRA”, “controlnet”等一系列概念非常困难, 更别说基于理解做一个工作流了.

这次英伟达整了个花活, 让大家看到了打破这个门槛的可能性: 通过画图提示词, 自动生成匹配的comfyUI工作流!

英伟达将其命名为ComfyGen (comfy生成器)! 当然目前仅支持文生图模型.

在英伟达发布的内容中, 他们称: “ComfyGen可以生成高质量的图并泛化到其他领域 (如下图). ”

并且他们很自豪的宣称:“下图这么优秀的图, 完全是comfyGen基于SDXL规模的模型画的, 还没有用flux呢!”

当然, 作为学术性研究论文, 肯定不会很草率的下结论.

英伟达团队做了对比测试:

下图中分别为

1) SDXL原生

2) 两个微调模型 (用过的同学会很熟悉

3) 两个人搭的工作流

4) 两个不同的comfyGen制作的图 (后文原理部分中会说明这两者的区别)

可以看到效果基本一致, 甚至确实更符合人类对提示词的判断和理解.

同时他们还做了和C站上人类写的提示词作对比:

很显然, ComfyGen的效果略胜一筹.

不过由于项目未开源, 无法体验实际效果. 但是如果真的效果如英伟达发布所说, 那是相当惊艳了.

原理

ComfyGen 基于大型语言模型（LLM)，为用户输入的特定提示词自动定制和优化生成Comfyui工作流。

工作流中会组合多个专门的组件，如改进的输入处理、精细的解码器和超分辨率模块，显著提高生成图像的质量和细节。

ComfyGen 的核心在于其能够根据用户的具体需求，选择最适合的工作流组件，从而实现更高质量和更精确对齐的图像输出。

ComfyGen-IC对比ComfyGen-FT

这里英伟达制作了一个表格, 表格里记录了工作流画图的分类, 并基于美学和人类偏好的预测给他们的结果打分. 让他们让LLM选择最能匹配新提示词并且得分最高的工作流.
训练时, 同样把表格中的得分, 提示词和工作流作为训练内容. 推理时, 依旧让LLM通过提示词和高得分来预测一个最合适的工作流.

这份研究为很多agent的开发带来了新的思路, 不仅局限于comfyui, 同时对LLM本身的工作流的自动生成也将产生深远的影响.

53AI，企业落地大模型首选服务商

产品：场景落地咨询+大模型应用平台+行业解决方案

承诺：免费POC验证，效果达标后再合作。零风险落地应用大模型，已交付160+中大型企业

相关资讯

2026-01-31

全网首发！一张通往“人类禁区”的船票，手把手教你把 AI 送进 Moltbook

2026-01-30

ESLint创始人揭秘：用AI角色扮演编程，效率飙升

2026-01-30

谷歌官方推出！10 个 Gem 提示词，附详细Gem自律助手创建流程

2026-01-30

Skill手搓“自动化PPT神器”，不写一行代码

2026-01-29

简单的AGENTS.md竟然完胜复杂Skills，Vercel实测

2026-01-25

Claude Code 最佳实践：50 个实用技巧

2026-01-23

迈向资产化的提示词/Skill：从个人技巧到组织能力

2026-01-22

Anthropic 黑客松冠军的"核武库"流出：这才是 Claude Code 的正确打开方式

联系获取

160+中大型企业正在使用53AI

立即咨询预约演示

把握AI发展的机遇，共同探索、共同进步

2025-01-22

如何打造基于GenAI的员工服务机器人

2025-01-22

热点资讯

OpenAI Codex 实用技巧介绍

2025-11-14

如何在Cursor、Trae等工具中使用Skills？

2025-12-03

2025最新！NotebookLM一键出专业PPT，12套神级提示词直接抄

2025-12-26

OpenAI 官方发布 GPT Image 1.5 提示词指南（15+场景Prompt建议收藏！）

2025-12-17

Antigravity 新增 Skills 支持，前端 UI 开发效率飙升

2026-01-18

还在用 Gemini 3 写 PPT？这才是最酷炫的玩法（附提示词）

2025-11-27

提示词工程：用斯坦福发现的VS提示词技巧，解锁AI的无限创意

2025-11-09

Claude Code创始人亲授13招，看完发现我一直在"青铜"操作

2026-01-04

把我正在用的四百多个Nano Banana Pro图片风格转换提示词都送给你了

2025-11-30

Anthropic 社区负责人连更31条Claude Code技巧！比Claude Code创始人私藏的还硬核

2026-01-07

大家都在问

从“手搓 Prompt”到“无限循环”：AI 编码的下一个形态是“Ralph”吗？

2026-01-21

别让 Deep Research 只有“Deep”没有“Research”：如何用限定词逼出 100% 真数据？

2026-01-16

搜索已死，调研永存：如何像“情报专家”一样驾驭AI深度研究功能？

2026-01-13

Claude Code之父的13大Claude Code使用技巧，看看哪条对你有用？

2026-01-05

别信用户的嘴：如何写一个 Prompt，把“大白话”变成“搜索关键词”？

2025-12-22

Prompt是与LLM对话的唯一方式：为什么你的AI总是在产生“幻觉”？

2025-12-14

如何在Cursor、Trae等工具中使用Skills？

2025-12-03

如何写出完美的Prompt（提示词）？

2025-12-02

热门标签

内容创作大模型技术个人提效 langchain llamaindex 多模态技术 RAG技术智能客服知识图谱模型微调 RAGFlow coze Dify Fastgpt Bisheng Qanything AI+汽车 AI+金融 AI+工业 AI+培训 AI+SaaS 提示词框架提示词技巧 AI+电商 AI面试数字员工 ChatBI AI知识库开源大模型智能营销智能硬件智能化改造 AI+医疗 MaxKB Palantir Glean