stable diffusion新功能Reference Only,保持人物特征一致性,效果惊人

Stable Diffusion插件ControlNet新功能Reference Only,直译“仅供参考”,其实更像仿制图章,在特定的环境下是相当好用的,能保持画面良好的连贯性。

下面来介绍一下,reference Only的安装和使用效果。

02

安装方式

你如果你已经按照过controlnet了,直接去扩展那边检查更新就行。

图片

如果之前没安装过,那就在线安装,在可下载那边搜索 sd-webui-controlnet 安装即可。

也可以直接源码安装

github:https://github.com/Mikubill/sd-webui-controlnet.git

下载安装后,覆盖到\extensions目录下面。

图片

然后重启一下SD即可。

03

使用案例

3.1 基础使用对比:

这里我们先简单用一段咒语出一张图

正面:

masterpiece,best quality,highres,a girl,outdoors,a lace shirt,blue eyes,with green hair,a lace shirt,look at viewer
杰作,最好的质量,高清晰度,一个女孩,户外,一件蕾丝衬衫,蓝色的眼睛,绿色的头发,一件蕾丝衬衫,看观众

负面:

NSFW, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome0),((grayscale)), skin spots, acnes, skin blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbic d:1.21),(mutilated:1.21),(tranny:1.331),mutated hands,(poorly drawn hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331), extra limbs,(disfigured:1.331),(missingarms:1.331),(extra legs:1.331),(fused fingers:1.61051),(toe omany fingers:1.61051),(uncleareyes:1.331),lowers, bad hands,missingfingers, extra digit,bad ha ands, missing fingers, ((extra arms and legs))),
NSFW,(最差质量:2),(低质量:2),(正常质量:2),低分辨率,正常质量,((单色0),((灰度)),皮肤斑点,痤疮,皮肤瑕疵,老年斑,(丑陋:1.331),(重复:1.331),(病态d:1.21),(残缺:1.21),(变性:1.331),变异的手,(画得不好的手:1.5),模糊,(不良的解剖结构:1.21),(不良的比例:1.331),额外的肢体,(毁容:1.331),(失踪的手臂:1.331),(额外的腿:1.331),(融合的手指:1.61051),(脚趾多指:1.61051),(不清晰的眼睛:1.3 31)、下垂、手不好、手指缺失、手指多、哈和、手指缺失、((额外的手臂和腿)))、

出来的图是这样:

图片

然后把这张图拖动到ControlNet下面,预处理选择reference_only

图片

上面提示词,去掉过多的描述穿着的词汇,只剩下基础的:

masterpiece,best quality,highres,a girl,outdoors,

在不启用 ControlNet 和启用 ControlNet 分别出图做对比,也把上面原图放进来一起对比。

图片

很明显,如果不启用,生成的图就会随机了,但是一旦我勾上使用 reference_only,虽然描述词汇没有包含那些眼睛颜色、头发颜色等,但是出的图很大程度上还原了原图效果,这就很棒。

这里我们尝试添加妹子的各自服装,姿势,看看出的图是否还能保持人样貌一致性。

图片

效果还是很不错的。

3.2 三个reference模型对比

另外,还有其他2个接近的模型,分别是 reference_admin和 reference_adain++attn

图片

我们分别生成效果做下对比:

图片

可以看到,reference_admin效果不行,头发颜色和眼睛都没有很好还原,而 reference_adain++attn 和 reference_only都能很好的还原人物特征。

3.2 传统的图生图对比

另外我也测试了下图生图,用原图的当参考,然后不描述具体关键词和添加了更多的其他关键词,也做一下对比

图片

可以看到,直接输入1girl,不加额外的描述词的情况下,图生图会参考原图的一些特征来生成图,不过头发颜色有点偏差(第二张图),第三张则增加了更多的描述,也没加头发颜色等特征,出来的效果就变了,就不是绿色头发了。

04

总结

整体测试下来,Reference Only和 reference_adain++attn 都不错,都能很大程度上还原原图的人物特征,推荐使用,reference_admin则效果不佳另外,发现二次元方面效果比较理想,真人的话有待提高,所以这个模型更适合的场景是用来做小说绘画角色的固定使用,以及绘图故事使用。

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

👉[[CSDN大礼包:《StableDiffusion安装包&AI绘画入门学习资料》免费分享]]安全链接,放心点击

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
在这里插入图片描述
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉大厂AIGC实战案例👈

光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述

👉12000+AI关键词大合集👈

在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

  • 25
    点赞
  • 30
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值