【Stable Diffusion】ControlNet 最强用法:精准参考风格 reference 全解析

[人工智能]图像生成领域的StableDiffusion以其卓越的图像生成能力广受瞩目。作为其核心插件,ControlNet凭借出色的控制功能,已然成为创意工作者的得力助手。最新推出的参考风格功能,让用户能够轻松定制个性化图像风格,开启全新的创意探索之旅。

在这里插入图片描述

ControlNet:最强控制插件 ControlNet作为Stable
Diffusion的插件,以其强大的控制能力而闻名。它允许用户在生成图像的过程中,精确控制图像的细节、风格和整体效果。无论是调整图像的色调、对比度,还是改变图像的风格,ControlNet都能轻松应对。

因为AI生成人物往往是带有随机性的,每次生成都会有一些不可控的区别,所以一直以来,设计师们都想解决生成人物能保持统一这个问题。

自从ControlNet1.1.17的版本升级之后,作者更新了一个新的预处理器——reference。这个预处理器最大的作用,就是通过一张给定的参考图可以延续出一系列相似的图,这样就为我们给同一个角色生成系列图提供了可能,接下来让我们一起来看看它是怎么使用的。

使用方法

首先我们进入文生图,填写一段提示词。如下:(杰作,最好的质量),一头白发的女孩坐在绿植和鲜花的田野里,温暖的灯光,模糊的前景。

设置一下常规参数,先生成一张图。

接下来,我们想用这个人物作为主角生成一系列其他的图。将图片拖入到ControlNet中,预处理器选择reference
only,控制模型一定要选择“均衡”。保真度数值越高,对图片的参考就越强,我们先设置为1看看。

可以看到,在没有明确指向性提示词的情况下,人物形象保持了一致,但是她的表情、动作、服装产生了随机的不同程度的变化。

我们可以试着通过添加关键词的方式来给人物换装,比如添加“红裙子”。

同时更改服装和表情,比如添加“黑色校服、哭泣”。

同时更改动作和表情,比如添加“抱手、生气”。

同时更改姿态,环境和表情,比如添加“在花丛中奔跑、开心”。

添加“红色棒球帽,时尚卫衣,在商场逛街”。

通过一系列测试,可以发现这个功能可以让我们在绘制系列插画、漫画、小说插图等等工作时,能保持主角形象的统一,也能根据情况做实时的调整,如果后期再配合lora,潜力可以想象是非常大的。

其他应用

我们还可以测试一些有趣的东西,比如拿一些完全不相干的图片来做参考,看看会发生什么。

还是使用刚才女孩坐在草地上的提示词不变,但是参考图片换成一筐草莓。

得到了和刚才那张图比较接近的色调,说明这个风格参考也可以作为一种滤镜功能使用。找到喜欢的图片色调,就能直接参考出来。

如果使用蒙娜丽莎作为参考,会得到什么效果呢?

世界名画诞生了,而且似乎是连画风也进行了参考,甚至脸庞也有点像了,可能是我把参考值拉满了的原因。

再尝试参考一下梵高的星空,很好奇这种特别强烈的绘画风格参考出来是什么样的。

当当,图像生成

色调、笔触还挺有那个味道的,而且像素越低,感觉越像是什么回事。

最后,我们再使用reference进行一下扩图。将上面这张图发送到图生图,调整尺寸,用较小的重绘幅度,得到下面这张图片。

进行局部重绘,将两边区域图上蒙版。

正向提示词改为“长满鲜花和植物的田野”,来描述背景的内容。

ControlNet继续使用星空来控制参考风格。

这样背景就扩充好了,效果还是不错的。

借用这个思路,我们还可以尝试通过多个ControlNet通道的结合,来实现绘图的风格控制。

比如,我们接下来要给这张线稿上色。

然后风格参考这张水彩的插画。

两个通道分别如下设置:一个采用lineart_anime做预处理器;另一个用reference_only做参考风格。提示词为:一个女孩,头像,水彩。

点击生成,我们就通过参考风格绘制好了这张线稿上色。这张的模型使用的是有名的二次元模型“AnythingV5V3_v5PrtRE”。

使用不同的模型和参数设置也会产生不用的效果,比如这张更换了大模型“colorBoxModel_colorBOX”,色彩更鲜明一些。

这张还是使用的“AnythingV5V3_v5PrtRE”模型,并额外添加了“Moxin”Lora,水墨风格化更明显了。

好了,以上就是ControlNet插件当中reference参考预处理器的介绍,更多的用法大家可以自己去发掘,玩得开心。

资料软件免费放送

次日同一发放请耐心等待

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉12000+AI关键词大合集👈

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值