在学习Stable Diffusion提示词之前我们首先要明白一点,即Stable Diffusion和大语言模型是不同的,它对自然语言的理解能力是不如大语言模型的。
1. 基础规则
(1)英文书写
ComfyUI的提示词必须采用英文书写(英文提示词及标点符号),因为其采用的文本编码模式是CLIP是基于英文数据集训练的。
(2)使用词组
前面已经提到Stable Diffusion与大语言模型是不同的,使用词组的方式进行输入模型更能理解,也便于后续调整词组权重。
(3)词组大小
提示词的数量并不是越多越好,根据经验将提示词控制在75个以内效果会更好。
(4)提示词权重
提示词权重就是该提示词在生成的图片中其对应部分的权重大小。(权重越高在图片中体现会更好)
2. ComfyUI提示词权重规则和语法
(1)基本规则
- 提示词越靠前、权重越高。
- 权重可以无限低,但是不能过高。(易导致过拟合)
(2)权重调整
提示词权重可以通过中括号(降低)、小括号(增加)来调整、大括号(随机)对该提示词进行微调;也可以直接通过小括号后面接权重的方式来进行调整。
权重调整快捷键:选中提示词 Ctrl + 上键(增加);Ctrl + 下键(降低)。
3. 提示词进阶
(1)质量提升
因为Stable Diffusion的生图原理是对提示词进行匹配生成,故在提示词中增加质量提升的词组可以有效提高图片质量。
比如正向提示词:
- 高质量:best quality, ultra-detailed, masterpiece
- 高分辨率:high resolution, 8k wallpaper
- 逼真:realistic
- 动态视角:dynamic angle
- 特定视角:from above, from below, wide shot, Aerial View
- 人物比例:full body, upper body
- 特定风格:cinematic lighting, vibrant colors, movie poster style
- 特定艺术风格:starry night, thick brush strokes, blue and green tones
- 特定光线和色彩:neon lights, city at night, bright colors
- 特定视角和姿态:bird’s-eye view, peeking from window
负向提示词: - 低质量:low quality, worst quality
- 正常质量:normal quality
- NSFW:Not Safe For Work,不适宜工作场合观看的内容
- 水印:watermark
- 文本:text
- 不良解剖结构:bad anatomy
- 绘制不佳的手:bad hands
- 多余的手指:extra fingers
- 手指融合:fused fingers
- 手臂问题:extra arms, missing arms, mutated hands
- 腿部问题:extra legs, missing legs
- 模糊:blurry
- 丑陋:ugly
- 重复:duplicate
- 病态:morbid
- 残缺:mutilated
- 变性:tranny
- 低分辨率:low res
- 皮肤问题:skin spots, acne, skin blemishes, age spot
- 眼睛问题:unclear eyes
- 其他身体问题:extra digit, fused fingers, too many fingers
- 背景问题:out of frame, jpeg artifacts
(2)提示词结构
大致可按如下结构进行编写,可以依据设想场景中元素重要性和权重原理对顺序进行微调,但是同一类提示词的需要在一块儿。
[正向提示词/画风/画质] + [主体] + [环境/场景/构图] + [细节描述]
(3)提示词污染
在输入多个提示词的时候,可能会存在提示词污染现象,即几个提示词在图中表现到了一起。
这个时候可以通过break分离。
(4)提示词融合
如果我们希望两个提示词合成同一个东西,就要用到提示词融合。
- 用完全大写的AND进行连接
- 下划线连接
- [提示词1|提示词2]
融合原理:先画前面的关键词,再画后面的关键词,最后再画前面的关键词。
这个时候也可以通过{提示词1:提示词2:0.7}这种形式书写。
其意思就是根据这个比例为提示词分配迭代次数的比例。前面的百分之70画提示词1的内容,后面的百分之30画提示词2的内容。
4. 提示增强外挂
(1)参考
参考模型下载网站上的提示词。
如在第三节中提到的带有效果预览的网站。
- LiblibAI-哩布哩布AI - 中国领先的AI创作平台
- FREE online image generator and model hosting site! | Tensor.Art (tusiart.com)
- 触手AI-AI图片生成工具产品-免费AI智能绘画生成在线平台 (acgnai.art)
- Civitai: The Home of Open-Source Generative AI
(2) 辅助网站
- 绘图提示:AI驱动的提示生成器 (drawing-prompt.com)
- PromptPerfect - AI Prompt Generator and Optimizer (jina.ai)
- Danbooru 标签超市 (novelai.dev)
- https://promlib.com/
- promptoMANIA: AI art community with prompt generator
(3) 增强插件
- ComfyUI_Custom_Nodes_AlekPet:将中文翻译为英文,使用方式在新建节点的地方选择AlekPet Nodes,里面有几种翻译方式。
在节点流中如下使用。
- ComfyUI ArtGallery:这个插件提供了风格提示词的可视化预览,帮助用户更好的理解和使用。
- ComfyUI-Custom-Scripts:提供了提示词自动补全、对齐网格、模型预览等功能。
感谢阅读,如果你喜欢的我的内容欢迎点赞关注,下期讲解插件的安装及使用。