PromptEnhancer
PromptEnhancer 是一款由腾讯混元团队开源的智能提示词优化工具,专为提升文生图(Text-to-Image)和图生图(Image-to-Image)的生成质量而设计。许多用户在创作时往往难以写出结构清晰、细节丰富的提示词,导致 AI 生成的图像不符合预期。PromptEnhancer 通过独特的“思维链”重写技术,能够自动将用户简单或模糊的输入,重构为逻辑严密、结构清晰且保留原始意图的高质量提示词,从而显著改善成像效果。
该工具不仅支持纯文本提示词的增强,还能结合视觉上下文对图像编辑指令进行精细化调整,确保主体、动作、风格及布局等关键元素在重写过程中不丢失。其内置的多级容错解析机制保证了输出的稳定性,同时提供从 7B 到 32B 多种规模的模型版本,支持全精度及量化部署,灵活适应不同算力需求。
无论是希望快速获得精美画面的设计师与普通创作者,还是致力于研究提示词工程或多模态模型的开发者与研究人员,都能从 PromptEnhancer 中获益。它降低了高质量提示词的制作门槛,让 AI 绘画变得更加简单可控,是连接人类创意与机器生成能力的高效桥梁。
使用场景
某电商设计团队正急需为“夏季新品运动鞋”生成一系列高质量营销海报,但设计师输入的初始提示词往往过于简略或逻辑松散。
没有 PromptEnhancer 时
- 细节丢失严重:简单的描述如“一双很酷的运动鞋在沙滩上”导致生成的图片缺乏光影质感、鞋底纹理及海浪飞溅等关键视觉元素。
- 结构混乱:模型难以区分主体、背景与风格修饰词,常出现鞋子变形、背景与主体融合错误等逻辑冲突。
- 反复试错成本高:设计师需手动迭代数十次提示词,不断添加形容词并调整语序,耗费大量时间却仍难获得稳定产出。
- 风格不一致:同一批次的不同图片中,光照方向和艺术风格(如写实 vs 插画)忽左忽右,无法满足系列化营销需求。
使用 PromptEnhancer 后
- 细节自动补全:PromptEnhancer 将简短指令重写为包含"4K 分辨率、黄金时刻光照、水珠特写、动态模糊”的结构化长提示,画面丰富度显著提升。
- 逻辑清晰分层:工具通过思维链技术将提示词重组为“主体描述 + 环境氛围 + 摄影参数 + 艺术风格”的标准格式,彻底消除主体畸形问题。
- 一次生成即达标:输入原始想法即可直接获得优化后的专业提示词,将单张海报的调试时间从 30 分钟压缩至 2 分钟。
- 风格高度统一:无论生成多少张图,PromptEnhancer 都能锁定核心风格标签,确保整套素材在色调和构图上保持完美一致。
PromptEnhancer 通过将模糊的自然语言转化为结构化、高保真的图像生成指令,让创意落地效率提升了十倍以上。
运行环境要求
- Linux
- macOS
- Windows
- 运行标准模型(7B/32B)需要 NVIDIA GPU
- 运行 GGUF 量化模型支持 CUDA 加速
- 显存需求:PromptEnhancer-7B 需 8GB+
- PromptEnhancer-32B (Q4_K_M) 需 20GB+ (RTX 3090/4080),(Q6_K) 需 27GB+ (RTX 4090/5090),(Q8_0/全精度) 需 32GB-35GB+ (A100/H100)
最低 8GB (仅运行 7B 模型),推荐 32GB+ (运行 32B 模型或进行图像编辑任务)

快速开始
PromptEnhancer:通过思维链提示重写提升文生图模型的简单方法
王林青 · 邢希明 · 徐志勇 · 程义吉 · 赵志远 · 李东浩 · 杭天凯 · 李振熙 · 陶嘉乐 · 王祺勋 · 李瑞煌 · 陈可米 · 李欣 · 吴明睿 · 邓心驰 · 顾书阳 · 王春宇† · 陆庆霖*
腾讯混元
†项目负责人 · *通讯作者
概述
Hunyuan-PromptEnhancer 是一款提示重写工具,同时支持文生图生成和图生图编辑。它在保留原始意图的同时重构输入提示,为下游图像生成任务提供更清晰、结构化的提示。
主要特点:
- 双模支持:文生图提示增强与结合视觉上下文的图生图编辑指令优化
- 意图保留:在重写过程中保持所有关键要素(主体、动作、风格、布局、属性等)不变
- 鲁棒解析:多级回退机制确保输出可靠
- 灵活部署:支持全精度(7B/32B)、量化(GGUF)及视觉语言模型
🔥🔥🔥更新
- [2025-10-11] ✨ 发布 PromptEnhancer-32B gradio。
- [2025-09-30] ✨ 发布 PromptEnhancer-Img2Img 编辑模型。
- [2025-09-22] 🚀 感谢 @mradermacher 添加了 GGUF 模型支持,实现量化模型的高效推理!
- [2025-09-18] ✨ 尝试 PromptEnhancer-32B,以获得更高质量的提示增强!
- [2025-09-16] ✨ 发布 T2I-Keypoints-Eval 数据集。
- [2025-09-07] ✨ 发布 PromptEnhancer-7B 模型。
- [2025-09-07] ✨ 发布 技术报告。
安装
方法一:标准安装(推荐)
pip install -r requirements.txt
方法二:GGUF 安装(适用于支持 CUDA 的量化模型)
chmod +x script/install_gguf.sh && ./script/install_gguf.sh
💡 提示:如果您希望以更低的内存占用实现更快的推理,尤其是针对 32B 模型时,建议选择 GGUF 安装。
模型下载
🎯 快速入门
对于大多数用户,我们推荐从 PromptEnhancer-7B 模型开始:
# 下载 PromptEnhancer-7B(13GB)——质量和效率的最佳平衡
huggingface-cli download tencent/HunyuanImage-2.1/reprompt --local-dir ./models/promptenhancer-7b
📊 模型对比与选择指南
| 模型 | 大小 | 质量 | 内存 | 适用场景 |
|---|---|---|---|---|
| PromptEnhancer-7B | 13GB | 高 | 8GB+ | 大多数用户,性能均衡 |
| PromptEnhancer-32B | 64GB | 最高 | 32GB+ | 研究用途,对质量要求极高 |
| 32B-Q8_0(GGUF) | 35GB | 最高 | 35GB+ | 高端 GPU(H100、A100) |
| 32B-Q6_K(GGUF) | 27GB | 优秀 | 27GB+ | RTX 4090、RTX 5090 |
| 32B-Q4_K_M(GGUF) | 20GB | 良好 | 20GB+ | RTX 3090、RTX 4080 |
标准模型(全精度)
# PromptEnhancer-7B(推荐给大多数用户)
huggingface-cli download tencent/HunyuanImage-2.1/reprompt --local-dir ./models/promptenhancer-7b
# PromptEnhancer-32B(用于最高质量)
huggingface-cli download PromptEnhancer/PromptEnhancer-32B --local-dir ./models/promptenhancer-32b
# PromptEnhancer-Img2img-Edit(用于图像编辑任务)
huggingface-cli download PromptEnhancer/PromptEnhancer-Img2img-Edit --local-dir ./models/promptenhancer-img2img-edit
GGUF 模型(量化——内存高效)
请根据您的 GPU 内存选择:
# Q8_0:最高质量(35GB)
huggingface-cli download mradermacher/PromptEnhancer-32B-GGUF PromptEnhancer-32B.Q8_0.gguf --local-dir ./models
# Q6_K:优秀质量(27GB)——推荐用于 RTX 4090
huggingface-cli download mradermacher/PromptEnhancer-32B-GGUF PromptEnhancer-32B.Q6_K.gguf --local-dir ./models
# Q4_K_M:良好质量(20GB) - 推荐用于 RTX 3090/4080
huggingface-cli download mradermacher/PromptEnhancer-32B-GGUF PromptEnhancer-32B.Q4_K_M.gguf --local-dir ./models
🚀 性能提示:GGUF 模型可在质量损失极小的情况下,将显存占用降低 50%-75%。若需在质量和显存占用之间取得最佳平衡,建议使用 Q6_K。
快速入门
使用 HunyuanPromptEnhancer(文本到图像)
from inference.prompt_enhancer import HunyuanPromptEnhancer
models_root_path = "./models/promptenhancer-7b"
enhancer = HunyuanPromptEnhancer(models_root_path=models_root_path, device_map="auto")
# 增强提示词(中文或英文)
user_prompt = "第三人称视角,一辆赛车正在城市赛道上飞驰..."
new_prompt = enhancer.predict(
prompt_cot=user_prompt,
# 默认系统提示专为图像提示改写设计;如有需要可覆盖
temperature=0.7, # >0 启用采样;0 使用确定性生成
top_p=0.9,
max_new_tokens=256,
)
print("增强后:", new_prompt)
使用 PromptEnhancerImg2Img(图像编辑)
适用于基于输入图像增强编辑指令的图像编辑任务:
from inference.prompt_enhancer_img2img import PromptEnhancerImg2Img
# 初始化图像到图像的提示增强器
enhancer = PromptEnhancerImg2Img(
model_path="./models/your-model",
device_map="auto"
)
# 在图像上下文中增强编辑指令
edit_instruction = "移除底部的水印"
image_path = "./examples/sample_image.png"
enhanced_prompt = enhancer.predict(
edit_instruction=edit_instruction,
image_path=image_path,
temperature=0.1,
top_p=0.9,
max_new_tokens=2048
)
print("增强后的编辑提示:", enhanced_prompt)
使用 GGUF 模型(量化、更快速)
from inference.prompt_enhancer_gguf import PromptEnhancerGGUF
# 自动检测 models/ 文件夹中的 Q8_0 模型
enhancer = PromptEnhancerGGUF(
model_path="./models/PromptEnhancer-32B.Q8_0.gguf", // 可选:自动检测
n_ctx=1024, // 上下文窗口大小
n_gpu_layers=-1, // 使用所有 GPU 层
)
# 增强提示词
user_prompt = "丛林中的女人"
enhanced_prompt = enhancer.predict(
user_prompt,
temperature=0.3,
top_p=0.9,
max_new_tokens=512,
)
print("增强后:", enhanced_prompt)
命令行使用(GGUF)
# 简单用法 - 自动检测 models/ 文件夹中的模型
python inference/prompt_enhancer_gguf.py
# 或指定模型路径
GGUF_MODEL_PATH="./models/PromptEnhancer-32B.Q8_0.gguf" python inference/prompt_enhancer_gguf.py
GGUF 模型的优势
🚀 为什么使用 GGUF 模型?
- 内存高效:与全精度模型相比,显存占用减少 50%-75%
- 推理更快:针对 CPU 和 GPU 加速进行了优化,兼容 llama.cpp
- 质量保持:Q8_0 和 Q6_K 能够保持出色的输出质量
- 部署简便:单一文件格式,无需复杂依赖
- GPU 加速:全面支持 CUDA,实现高性能推理
| 模型 | 大小 | 质量 | 显存占用 | 适用场景 |
|---|---|---|---|---|
| Q8_0 | 35GB | 最高 | ~35GB | 高端 GPU(H100、A100) |
| Q6_K | 27GB | 优秀 | ~27GB | RTX 4090、RTX 5090 |
| Q4_K_M | 20GB | 良好 | ~20GB | RTX 3090、RTX 4080 |
使用对比
| 模型 | 输入类型 | 使用场景 | 模型后端 |
|---|---|---|---|
| HunyuanPromptEnhancer | 仅文本 | 文本到图像生成 | Transformers(7B/32B) |
| PromptEnhancerImg2Img | 文本 + 图像 | 图像编辑任务 | Transformers(32B) |
| PromptEnhancerGGUF | 仅文本 | 内存高效的 T2I | llama.cpp(量化) |
参数说明
标准模型(Transformers)
models_root_path:本地路径或仓库 ID;支持trust_remote_code模型。device_map:设备映射(默认为auto)。predict(...):prompt_cot(str):待改写的输入提示。sys_prompt(str):可选系统提示;图像提示改写时会提供默认值。temperature(float):>0启用采样;0表示确定性生成。top_p(float):核采样阈值(启用采样时有效)。max_new_tokens(int):最多生成的新标记数。
GGUF 模型
model_path(str):GGUF 模型文件路径(若位于 models/ 文件夹中则自动检测)。n_ctx(int):上下文窗口大小(默认为 8192,短提示推荐 1024)。n_gpu_layers(int):卸载到 GPU 的层数(-1 表示全部层)。verbose(bool):启用来自 llama.cpp 的详细日志记录。
图像到图像模型(PromptEnhancerImg2Img)
model_path(str):预训练的 Qwen2.5-VL 模型路径。device_map(str):模型加载时的设备映射(默认为auto)。predict(...):edit_instruction(str):原始编辑指令。image_path(str):输入图像文件路径。sys_prompt(str):可选系统提示(若未提供则使用默认值)。temperature(float):采样温度(默认为 0.1)。top_p(float):核采样阈值(默认为 0.9)。max_new_tokens(int):最多生成的新标记数(默认为 2048)。
引用
如果您觉得本项目有用,请考虑引用以下内容:
@article{promptenhancer,
title={PromptEnhancer: A Simple Approach to Enhance Text-to-Image Models via Chain-of-Thought Prompt Rewriting},
author={Wang, Linqing and Xing, Ximing and Cheng, Yiji and Zhao, Zhiyuan and Donghao, Li and Tiankai, Hang and Zhenxi, Li and Tao, Jiale and Wang, QiXun and Li, Ruihuang and Chen, Comi and Li, Xin and Wu, Mingrui and Deng, Xinchi and Gu, Shuyang and Wang, Chunyu and Lu, Qinglin},
journal={arXiv preprint arXiv:2509.04545},
year={2025}
}
致谢
我们衷心感谢以下开源项目和社区对开放研究与探索所作出的贡献:Transformers 和 HuggingFace。
联系方式
如您想向我们的研发和产品团队留言,欢迎联系我们的开源团队。您也可以通过电子邮件(hunyuan_opensource@tencent.com)与我们取得联系。
Github 星标历史
星标历史
常见问题
相似工具推荐
stable-diffusion-webui
stable-diffusion-webui 是一个基于 Gradio 构建的网页版操作界面,旨在让用户能够轻松地在本地运行和使用强大的 Stable Diffusion 图像生成模型。它解决了原始模型依赖命令行、操作门槛高且功能分散的痛点,将复杂的 AI 绘图流程整合进一个直观易用的图形化平台。 无论是希望快速上手的普通创作者、需要精细控制画面细节的设计师,还是想要深入探索模型潜力的开发者与研究人员,都能从中获益。其核心亮点在于极高的功能丰富度:不仅支持文生图、图生图、局部重绘(Inpainting)和外绘(Outpainting)等基础模式,还独创了注意力机制调整、提示词矩阵、负向提示词以及“高清修复”等高级功能。此外,它内置了 GFPGAN 和 CodeFormer 等人脸修复工具,支持多种神经网络放大算法,并允许用户通过插件系统无限扩展能力。即使是显存有限的设备,stable-diffusion-webui 也提供了相应的优化选项,让高质量的 AI 艺术创作变得触手可及。
ComfyUI
ComfyUI 是一款功能强大且高度模块化的视觉 AI 引擎,专为设计和执行复杂的 Stable Diffusion 图像生成流程而打造。它摒弃了传统的代码编写模式,采用直观的节点式流程图界面,让用户通过连接不同的功能模块即可构建个性化的生成管线。 这一设计巧妙解决了高级 AI 绘图工作流配置复杂、灵活性不足的痛点。用户无需具备编程背景,也能自由组合模型、调整参数并实时预览效果,轻松实现从基础文生图到多步骤高清修复等各类复杂任务。ComfyUI 拥有极佳的兼容性,不仅支持 Windows、macOS 和 Linux 全平台,还广泛适配 NVIDIA、AMD、Intel 及苹果 Silicon 等多种硬件架构,并率先支持 SDXL、Flux、SD3 等前沿模型。 无论是希望深入探索算法潜力的研究人员和开发者,还是追求极致创作自由度的设计师与资深 AI 绘画爱好者,ComfyUI 都能提供强大的支持。其独特的模块化架构允许社区不断扩展新功能,使其成为当前最灵活、生态最丰富的开源扩散模型工具之一,帮助用户将创意高效转化为现实。
ML-For-Beginners
ML-For-Beginners 是由微软推出的一套系统化机器学习入门课程,旨在帮助零基础用户轻松掌握经典机器学习知识。这套课程将学习路径规划为 12 周,包含 26 节精炼课程和 52 道配套测验,内容涵盖从基础概念到实际应用的完整流程,有效解决了初学者面对庞大知识体系时无从下手、缺乏结构化指导的痛点。 无论是希望转型的开发者、需要补充算法背景的研究人员,还是对人工智能充满好奇的普通爱好者,都能从中受益。课程不仅提供了清晰的理论讲解,还强调动手实践,让用户在循序渐进中建立扎实的技能基础。其独特的亮点在于强大的多语言支持,通过自动化机制提供了包括简体中文在内的 50 多种语言版本,极大地降低了全球不同背景用户的学习门槛。此外,项目采用开源协作模式,社区活跃且内容持续更新,确保学习者能获取前沿且准确的技术资讯。如果你正寻找一条清晰、友好且专业的机器学习入门之路,ML-For-Beginners 将是理想的起点。
ragflow
RAGFlow 是一款领先的开源检索增强生成(RAG)引擎,旨在为大语言模型构建更精准、可靠的上下文层。它巧妙地将前沿的 RAG 技术与智能体(Agent)能力相结合,不仅支持从各类文档中高效提取知识,还能让模型基于这些知识进行逻辑推理和任务执行。 在大模型应用中,幻觉问题和知识滞后是常见痛点。RAGFlow 通过深度解析复杂文档结构(如表格、图表及混合排版),显著提升了信息检索的准确度,从而有效减少模型“胡编乱造”的现象,确保回答既有据可依又具备时效性。其内置的智能体机制更进一步,使系统不仅能回答问题,还能自主规划步骤解决复杂问题。 这款工具特别适合开发者、企业技术团队以及 AI 研究人员使用。无论是希望快速搭建私有知识库问答系统,还是致力于探索大模型在垂直领域落地的创新者,都能从中受益。RAGFlow 提供了可视化的工作流编排界面和灵活的 API 接口,既降低了非算法背景用户的上手门槛,也满足了专业开发者对系统深度定制的需求。作为基于 Apache 2.0 协议开源的项目,它正成为连接通用大模型与行业专有知识之间的重要桥梁。
PaddleOCR
PaddleOCR 是一款基于百度飞桨框架开发的高性能开源光学字符识别工具包。它的核心能力是将图片、PDF 等文档中的文字提取出来,转换成计算机可读取的结构化数据,让机器真正“看懂”图文内容。 面对海量纸质或电子文档,PaddleOCR 解决了人工录入效率低、数字化成本高的问题。尤其在人工智能领域,它扮演着连接图像与大型语言模型(LLM)的桥梁角色,能将视觉信息直接转化为文本输入,助力智能问答、文档分析等应用场景落地。 PaddleOCR 适合开发者、算法研究人员以及有文档自动化需求的普通用户。其技术优势十分明显:不仅支持全球 100 多种语言的识别,还能在 Windows、Linux、macOS 等多个系统上运行,并灵活适配 CPU、GPU、NPU 等各类硬件。作为一个轻量级且社区活跃的开源项目,PaddleOCR 既能满足快速集成的需求,也能支撑前沿的视觉语言研究,是处理文字识别任务的理想选择。
tesseract
Tesseract 是一款历史悠久且备受推崇的开源光学字符识别(OCR)引擎,最初由惠普实验室开发,后由 Google 维护,目前由全球社区共同贡献。它的核心功能是将图片中的文字转化为可编辑、可搜索的文本数据,有效解决了从扫描件、照片或 PDF 文档中提取文字信息的难题,是数字化归档和信息自动化的重要基础工具。 在技术层面,Tesseract 展现了强大的适应能力。从版本 4 开始,它引入了基于长短期记忆网络(LSTM)的神经网络 OCR 引擎,显著提升了行识别的准确率;同时,为了兼顾旧有需求,它依然支持传统的字符模式识别引擎。Tesseract 原生支持 UTF-8 编码,开箱即用即可识别超过 100 种语言,并兼容 PNG、JPEG、TIFF 等多种常见图像格式。输出方面,它灵活支持纯文本、hOCR、PDF、TSV 等多种格式,方便后续数据处理。 Tesseract 主要面向开发者、研究人员以及需要构建文档处理流程的企业用户。由于它本身是一个命令行工具和库(libtesseract),不包含图形用户界面(GUI),因此最适合具备一定编程能力的技术人员集成到自动化脚本或应用程序中
