刚学的一些提升AI生成图像质量的技巧

程序员一东

已于 2025-03-17 11:39:33 修改

阅读量1.5k

点赞数 11

文章标签：人工智能 AI作画 stable diffusion ai绘画 midjourney

于 2024-11-20 10:54:01 首次发布

本文链接：https://blog.csdn.net/Eqiqi/article/details/143905237

版权

玩了几天 Midjourney，最近换 Stable Diffusion 生成了不少图片，过程中学到使用SD的一些知识。

1. 尽量按照推荐参数使用模型

从网上下了很多SD模型，有大模型有Lora模型，但不管是大模型还是Lora模型生成的图片总是达不到网站效果图的效果。我以为下载的文件有问题，大模型特别大占不少硬盘空间，删了也不是留着也不是。

现在有点后知后觉，这是因为模型最终效果受采样器、迭代步数、图片尺寸等很多参数的影响。

如果参数不恰当，即便写8K、高清晰度、不要扭曲的手等提示词，出的图大概率也是很差的。比如这样（还有很畸形的图就不放出来污染大家眼睛了）：

所以下载模型时，一定要看作者有没有推荐的配置参数，Lora模型推荐用哪个大模型等，并将其记录下来以供参考。比如：

麦橘写实：

采样器：选Euler,restart
迭代步数：30
脸部修复：无须

万享超写实_1.5：

建议尺寸：可以跑512768(加放大效果最好)，7681024，7681152，如6241024竖图最好跑全身像，半身像会拉伸人物导致脖子或者身体拉长问题，以上尺寸横竖都可跑）
采样器：DPM++ 2S a Karras
迭代步数：25以上
脸部修复：建议开启ADetailer
高分辨率修复建议：放大算法：4x-UltraSharp，重绘幅度：0.4-0.75

很多模型是英文名词，而且模型预览界面长一个样（如下图），要记住哪个模型擅长干什么，并且记住推荐参数，不容易。即便记在小本本上，用的时候去找也会觉得麻烦。

所以建议把预览图贴上去。方法是下载模型的时候，顺便把效果图保存下来（与模型使用相同名称保存为png或jpg格式），并与模型放在相同的目录下。这样就可以在webui界面查看了。

点击预览图右上角设置图标。把一些想记的东西，写在笔记栏。这样下次用的时候很方便。（我猜测：一些完善的模型，作者会做这个工作，但很多爱好者只是训练模型，描述、笔记这些内容就懒地写了）

2. 高分辨率修复和ADetailer插件

我用的是MacBook
Air
M1，生成大尺寸图或开启“高分辨率修复”后，感觉机器发热明显。所以一般不想开启，只想在提示词写上“8K、高清晰度、不要扭曲的手”之类的关键词，多次生图后，效果很差，很有挫败感。

现在知道，这是对SD原理似懂非懂导致的。

因为图像是由很多像素点组成的，这些点的密集程度决定了图像的精细度。高分辨率的图像有更多的像素点，所以能够展现丰富的细节。而分辨率低的图像，由于像素点少，一大块整体颜色替代了本应很多像素点才能组成的微妙变化，所以图像就缺乏清晰度和真实感，甚至会扭曲变形。

生成大尺寸图或开启“高分辨率修复”后，强迫AI去计算更多的细节，确保像素点的密度足够，且每个像素点在正确的位置，有正确的颜色，于是就画出了高质量的效果。

也正是因为AI去计算更多细节，所以耗能严重，机器发热。

有一个必备插件是ADetailer。它可以让AI专注于提升脸和手的细节和分辨率，而不必提升整张图的所有细节，从而在保证质量的同时控制性能消耗。

当然需要提醒的是，即便开启了高分辨率修复或使用了ADetailer插件，也会出现脸崩或手崩的情况，只是概率会降低。这是AI生图机制的限制。

3. 为什么写了提示词没效果

我现在的理解不知道对不对。使用1.5等基础大模型，可能需要在提示词中强调高分辨率等内容，而使用训练后的模型或Lora模型，选择了推荐的分辨率、步数等参数，一般就不需要再写了。只需要写你希望生成图片的主体内容就可以了。

不过在玩的过程中，我发现了一个提示词的知识点挺关键的。

不是写什么提示词都有用，比如我想生成一个人物全身像，写“全身”、“全身像”、“从头到脚” ，甚至设置权重都不一定管用。

问题出在哪儿呢？除了看你选择的模型擅长什么之外。问题是其他的提示词都是强调脸、手的关键词，比如“帅气”、“美丽”、“精致的五官”、“高级的妆容”、“短发”、“长发”、“帽子”、“亚洲面容”等等。导致AI会重点关注这些地方，从而降低了画出“全身”的概率。

解决办法是，增加跟全身相关的提示词，比如“短裤”、“牛仔裤”、“板鞋”、“球鞋”、“修长的腿”、“走在人行道上”等，这样AI就会注意到这些要求，从而增加画出“全身”的概率。

AI也会考虑到图像的尺寸，长图画出“全身”的概率更高。即是说9:16的图比16:9、1:1尺寸的图，更容易出现全身。

背后的原理应该是AI会计算图像宽高比以及所有提示词的向量表示，并将这些向量合并或加权求和，生成一个综合的特征表示空间后，根据整体结论出图，而不是某一两个具体的提示词。

最后还得感叹一句，坑挺多的。AI时代不是普通人说一句自然语言就能得到想要结果的。我们对拉车的人说，汽车虽然是自己跑的，但你得学会开。

最后放一些 Stable Diffusion 生成的图片吧。

针对各位AIGC初学者，这里列举了一条完整的学习计划，感兴趣的可以阅读看看，希望对你的学习之路有所帮助，废话不多说，进入正题：目标应该是这样的：

第一阶段（30天）：AI-GPT从入门到深度应用

该阶段首先通过介绍AI-GPT从入门到深度应用目录结构让大家对GPT有一个简单的认识，同时知道为什么要学习GPT使用方法。然后我们会正式学习GPT深度玩法应用场景。

-----------

GPT的定义与概述
GPT与其他AI对比区别
GPT超强记忆力体验
万能GPT如何帮你解决一切问题？
GPT表达方式优化
GPT多类复杂应用场景解读
3步刨根问底获取终极方案
4步提高技巧-GPT高情商沟通
GPT深度玩法应用场景
GPT高级角色扮演-教学老师
GPT高级角色扮演-育儿专家
GPT高级角色扮演-职业顾问
GPT高级角色扮演-专业私人健身教练
GPT高级角色扮演-心理健康顾问
GPT高级角色扮演-程序UX/UI界面开发顾问
GPT高级角色扮演-产品经理
GPT高级技巧-游戏IP角色扮演
GPT高级技巧-文本冒险游戏引导
GPT实操练习-销售行业
GPT实操练习-菜谱推荐
GPT实操练习-美容护肤
GPT实操练习-知识问答
GPT实操练习-语言学习
GPT实操练习-科学减脂
GPT实操练习-情感咨询
GPT实操练习-私人医生
GPT实操练习-语言翻译
GPT实操练习-作业辅导
GPT实操练习-聊天陪伴
GPT实操练习-育儿建议
GPT实操练习-资产配置
GPT实操练习-教学课程编排
GPT实操练习-活动策划
GPT实操练习-法律顾问
GPT实操练习-旅游指南
GPT实操练习-编辑剧本
GPT实操练习-面试招聘
GPT实操练习-宠物护理和训练
GPT实操练习-吸睛爆款标题生成
GPT实操练习-自媒体爆款软件拆解
GPT实操练习-自媒体文章创作
GPT实操练习-高效写作推广方案
GPT实操练习-星座分析
GPT实操练习-原创音乐创作
GPT实操练习-起名/解梦/写诗/写情书/写小说
GPT提升工作效率-Word关键字词提取
GPT提升工作效率-Word翻译实现
GPT提升工作效率-Word自动填写、排版
GPT提升工作效率-Word自动纠错、建议
GPT提升工作效率-Word批量生产优质文章
GPT提升工作效率-Excel自动化实现数据计算、分析
GPT提升工作效率-Excel快速生成、拆分及合并实战
GPT提升工作效率-Excel生成复杂任务实战
GPT提升工作效率-Excel用Chat Excel让效率起飞
GPT提升工作效率–PPT文档内容读取实现
GPT提升工作效率–PPT快速批量调整PPT文档
GPT提升工作效率-文件批量创建、复制、移动等高效操作
GPT提升工作效率-文件遍历、搜索等高效操作
GPT提升工作效率-邮件自动发送
GPT提升工作效率-邮件自动回复
GPT接入QQ与QQ群实战
GPT接入微信与微信群实战
GPT接入QQ与VX多用户访问实战
GPT接入工具与脚本部署实战

第二阶段（30天）：AI-绘画进阶实战

该阶段我们正式进入AI-绘画进阶实战学习，首先通过了解AI绘画定义与概述，AI绘画的应用领域，PAI绘画与传统绘画的区别，AI绘画的工具分类介绍的基本概念，以及AI绘画工具Midjourney、Stable Diffusion的使用方法，还有AI绘画插件和模板的使用为我们接下来的实战设计学习做铺垫。