Stable Diffusion插件ControlNet新功能Reference Only,直译“仅供参考”,其实更像仿制图章,在特定的环境下是相当好用的,能保持画面良好的连贯性。
下面来介绍一下,reference Only的安装和使用效果。
02
安装方式
你如果你已经按照过controlnet了,直接去扩展那边检查更新就行。
如果之前没安装过,那就在线安装,在可下载那边搜索 sd-webui-controlnet 安装即可。
也可以直接源码安装
github:https://github.com/Mikubill/sd-webui-controlnet.git
下载安装后,覆盖到\extensions目录下面。
然后重启一下SD即可。
03
使用案例
3.1 基础使用对比:
这里我们先简单用一段咒语出一张图
正面:
masterpiece,best quality,highres,a girl,outdoors,a lace shirt,blue eyes,with green hair,a lace shirt,look at viewer
杰作,最好的质量,高清晰度,一个女孩,户外,一件蕾丝衬衫,蓝色的眼睛,绿色的头发,一件蕾丝衬衫,看观众
负面:
NSFW, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome0),((grayscale)), skin spots, acnes, skin blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbic d:1.21),(mutilated:1.21),(tranny:1.331),mutated hands,(poorly drawn hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331), extra limbs,(disfigured:1.331),(missingarms:1.331),(extra legs:1.331),(fused fingers:1.61051),(toe omany fingers:1.61051),(uncleareyes:1.331),lowers, bad hands,missingfingers, extra digit,bad ha ands, missing fingers, ((extra arms and legs))),
NSFW,(最差质量:2),(低质量:2),(正常质量:2),低分辨率,正常质量,((单色0),((灰度)),皮肤斑点,痤疮,皮肤瑕疵,老年斑,(丑陋:1.331),(重复:1.331),(病态d:1.21),(残缺:1.21),(变性:1.331),变异的手,(画得不好的手:1.5),模糊,(不良的解剖结构:1.21),(不良的比例:1.331),额外的肢体,(毁容:1.331),(失踪的手臂:1.331),(额外的腿:1.331),(融合的手指:1.61051),(脚趾多指:1.61051),(不清晰的眼睛:1.3 31)、下垂、手不好、手指缺失、手指多、哈和、手指缺失、((额外的手臂和腿)))、
出来的图是这样:
然后把这张图拖动到ControlNet下面,预处理选择reference_only
上面提示词,去掉过多的描述穿着的词汇,只剩下基础的:
masterpiece,best quality,highres,a girl,outdoors,
在不启用 ControlNet 和启用 ControlNet 分别出图做对比,也把上面原图放进来一起对比。
很明显,如果不启用,生成的图就会随机了,但是一旦我勾上使用 reference_only,虽然描述词汇没有包含那些眼睛颜色、头发颜色等,但是出的图很大程度上还原了原图效果,这就很棒。
这里我们尝试添加妹子的各自服装,姿势,看看出的图是否还能保持人样貌一致性。
效果还是很不错的。
3.2 三个reference模型对比
另外,还有其他2个接近的模型,分别是 reference_admin和 reference_adain++attn
我们分别生成效果做下对比:
可以看到,reference_admin效果不行,头发颜色和眼睛都没有很好还原,而 reference_adain++attn 和 reference_only都能很好的还原人物特征。
3.2 传统的图生图对比
另外我也测试了下图生图,用原图的当参考,然后不描述具体关键词和添加了更多的其他关键词,也做一下对比
可以看到,直接输入1girl,不加额外的描述词的情况下,图生图会参考原图的一些特征来生成图,不过头发颜色有点偏差(第二张图),第三张则增加了更多的描述,也没加头发颜色等特征,出来的效果就变了,就不是绿色头发了。
04
总结
整体测试下来,Reference Only和 reference_adain++attn 都不错,都能很大程度上还原原图的人物特征,推荐使用,reference_admin则效果不佳另外,发现二次元方面效果比较理想,真人的话有待提高,所以这个模型更适合的场景是用来做小说绘画角色的固定使用,以及绘图故事使用。
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
👉[[CSDN大礼包:《StableDiffusion安装包&AI绘画入门学习资料》免费分享]](安全链接,放心点击)
对于0基础小白入门:
如果你是零基础小白,想快速入门AI绘画是可以考虑的。
一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案
包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!
零基础AI绘画学习资源介绍
👉stable diffusion新手0基础入门PDF👈
(全套教程文末领取哈)
👉AI绘画必备工具👈
👉AI绘画基础+速成+进阶使用教程👈
观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉大厂AIGC实战案例👈
光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
👉12000+AI关键词大合集👈
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
![](https://img-blog.csdnimg.cn/img_convert/e9172b39a9644bf0ef7e00772a4ffb23.png)