AI绘画：StableDiffusion固定角色大法，无限生成统一风格的图片

最新推荐文章于 2025-01-04 09:44:18 发布

程序员小何SS

最新推荐文章于 2025-01-04 09:44:18 发布

阅读量1.4k

点赞数 28

本文链接：https://blog.csdn.net/xiaokangss/article/details/142786599

版权

今天给大家介绍 StableDiffusion中ControlNet 的两个用法，其中一个是Shuffle（随机洗牌），另一个是
Reference（参考），其中 Reference 还能起到固定角色的功能，无限生成统一风格的角色图片。

一、Shuffle（随机洗牌）

找到ControlNet，勾选启用、完美像素，Shuffle（随机洗牌），从网上找到一张比较有特色的图片扔给ControlNet。

大模型选择二维模型，提示词除了几个质量起手词外，其他的提示词为“Tall buildings, streets, cars, shopping
malls”意思是“高楼、街道、汽车、商场”

下图中，左边是SD将参考图打乱后的图片，右边是保留了原图元素之后生成的图片，它将原图中所有的颜色、线条的风格等元素全部沿用到了新生成的图片中（右图），对于做一些主体海报的延伸物料的时候比较有用。

二、Reference（参考）

我们先用 stablediffusion 生成一个角色形象。

正面提示词为：女孩，全身，波浪姜黄色头发，淡褐色眼睛，中式风格，蕾丝镶边，蓝色背景，POP
MART盲盒，IP形象，高级自然配色，明亮和谐，C4D风格，3D动画风格的人物设计

((best quality)),((masterpiece)),(detailed), girl,full body, wavy ginger hair,
hazel eyes, chinese style, lace trim,Blue background,POP MART blind box, IP
image,high-grade natural color matching, bright and harmonious, C4D style, 3D
animation style character design

我们把这个角色的图片扔给 ControlNet，然后在提示词中仅输入一些场景词，如坐在教室里 “Sitting in the
classroom”，StableDiffusion便会在基本保持原图角色统一的情况下，将原角色变换个场景。

Reference（参考）的设置基本保持默认，勾选”完美像素“，建议把权重值调到1（下图红框内），这样生成的图片能更接近参考图。

下图是仅靠提示词“Sitting in the classroom”生成的图片，虽然与原图相比，衣服的把控略显不足，但人物的面貌上面还是把控挺好的。

也就是说，用此方法，只要一张参考图，就可以无限生成统一风格的角色，而且也不用担心崩脸。

下图是仅靠提示词“Play badminton, badminton court”生成的图片

三、两张照片的融合处理

接着，我们打开第二个 ControlNet，在参考里面拉入第二张图片，这张图片是一个穿着绿色衣服，戴着紫色帽子的小矮人。

仍然以”坐在教室里“为提示词，最后生成了一图这张照片。

仔细观察，这张照片除了保留第一张参考图中人物面貌的特征和大部分衣着特征外，还保留了第二张参考图的绿衣服和蓝帽子特征，是不是很神奇。

好了，本期文章到此结束，如果对你有所帮助，感谢点赞和转发。

文章使用的AI工具SD整合包、各种模型插件、提示词、AI人工智能学习资料都已经打包好放在网盘中了，无需自行查找，有需要的小伙伴文末扫码自行获取。

针对各位AIGC初学者，这里列举了一条完整的学习计划，感兴趣的可以阅读看看，希望对你的学习之路有所帮助，废话不多说，进入正题：目标应该是这样的：

第一阶段（30天）：AI-GPT从入门到深度应用

该阶段首先通过介绍AI-GPT从入门到深度应用目录结构让大家对GPT有一个简单的认识，同时知道为什么要学习GPT使用方法。然后我们会正式学习GPT深度玩法应用场景。

-----------

GPT的定义与概述
GPT与其他AI对比区别
GPT超强记忆力体验
万能GPT如何帮你解决一切问题？
GPT表达方式优化
GPT多类复杂应用场景解读
3步刨根问底获取终极方案
4步提高技巧-GPT高情商沟通
GPT深度玩法应用场景
GPT高级角色扮演-教学老师
GPT高级角色扮演-育儿专家
GPT高级角色扮演-职业顾问
GPT高级角色扮演-专业私人健身教练
GPT高级角色扮演-心理健康顾问
GPT高级角色扮演-程序UX/UI界面开发顾问
GPT高级角色扮演-产品经理
GPT高级技巧-游戏IP角色扮演
GPT高级技巧-文本冒险游戏引导
GPT实操练习-销售行业
GPT实操练习-菜谱推荐
GPT实操练习-美容护肤
GPT实操练习-知识问答
GPT实操练习-语言学习
GPT实操练习-科学减脂
GPT实操练习-情感咨询
GPT实操练习-私人医生
GPT实操练习-语言翻译
GPT实操练习-作业辅导
GPT实操练习-聊天陪伴
GPT实操练习-育儿建议
GPT实操练习-资产配置
GPT实操练习-教学课程编排
GPT实操练习-活动策划
GPT实操练习-法律顾问
GPT实操练习-旅游指南
GPT实操练习-编辑剧本
GPT实操练习-面试招聘
GPT实操练习-宠物护理和训练
GPT实操练习-吸睛爆款标题生成
GPT实操练习-自媒体爆款软件拆解
GPT实操练习-自媒体文章创作
GPT实操练习-高效写作推广方案
GPT实操练习-星座分析
GPT实操练习-原创音乐创作
GPT实操练习-起名/解梦/写诗/写情书/写小说
GPT提升工作效率-Word关键字词提取
GPT提升工作效率-Word翻译实现
GPT提升工作效率-Word自动填写、排版
GPT提升工作效率-Word自动纠错、建议
GPT提升工作效率-Word批量生产优质文章
GPT提升工作效率-Excel自动化实现数据计算、分析
GPT提升工作效率-Excel快速生成、拆分及合并实战
GPT提升工作效率-Excel生成复杂任务实战
GPT提升工作效率-Excel用Chat Excel让效率起飞
GPT提升工作效率–PPT文档内容读取实现
GPT提升工作效率–PPT快速批量调整PPT文档
GPT提升工作效率-文件批量创建、复制、移动等高效操作
GPT提升工作效率-文件遍历、搜索等高效操作
GPT提升工作效率-邮件自动发送
GPT提升工作效率-邮件自动回复
GPT接入QQ与QQ群实战
GPT接入微信与微信群实战
GPT接入QQ与VX多用户访问实战
GPT接入工具与脚本部署实战

第二阶段（30天）：AI-绘画进阶实战

该阶段我们正式进入AI-绘画进阶实战学习，首先通过了解AI绘画定义与概述，AI绘画的应用领域，PAI绘画与传统绘画的区别，AI绘画的工具分类介绍的基本概念，以及AI绘画工具Midjourney、Stable Diffusion的使用方法，还有AI绘画插件和模板的使用为我们接下来的实战设计学习做铺垫。