大家好我是安琪!SD插件ControlNET的诞生,无法自定义姿势成为过去,自定义姿势;根据线稿、骨骼、其他图片生成全新的图,AI绘图自主可控;包括边缘检测,深度信息估算;姿态,手势检测;分割等等
场景:个人pose图,模特换装;装修出图;设计草图快速复原;颜色快速更换等等
此扩展用于AUTOMATIC1111的稳定扩散Web UI,允许Web UI将ControlNet添加到原始稳定扩散模型以生成图像
看下效果,就知道有多强了
安装ControlNET插件:
地址:(可以文末自行扫描获取)
找到右上角的扩展,然后点击从网址安装,把网址输入到下方
报错了:
AssertionError: extension access disabled because of command line flags
解决:
cd xx/stable-diffusion-webui/extensions
git clone https://github.com/Mikubill/sd-webui-controlnet
下载完之后需要重新启动服务才可以生效(启动服务前下载)
成功标志:
模型下载
ControlNET 相关模型(8个),不想自己下载的(可以文末自行扫描获取)
自己下载:
huggingface.co/lllyasviel/ControlNet-v1-1/tree/main
再上面一行的选中 设置(settings),找到contronet ,调试多个contronet为3,最后重新载入UI
插件controlnet介绍
把模型放到刚下载的插件\extensions\sd-webui-controlnet\models下,直接应用并重启界面
首页下方这块有ControlNET的模块,表示成功
基础参数配置与介绍
预处理器
先选OpenPose,后面的模型一定跟预处理器对应一致,比如:预处理器我们选了OpenPose,模型选OpenPose命名的
模型介绍
参考:
github.com/lllyasviel/ControlNet-v1-1-nightly
1 Normal Map
法线贴图控制稳定扩散
模型文件:control_v11p_sd15_normalbae.pth
用途:用在模拟3D模型的表面细节和凹凸纹理
2 Depth(MiDaS和LeReS深度信息估算)
使用深度贴图控制稳定扩散。
模型文件:control_v11f1p_sd15_depth.pth;
预处理器:Depth_Midas、Depth_Leres、Depth_Zoe
3 OpenPose
使用Openpose控制稳定扩散。
模型文件:control_v11p_sd15_openpose.pth
4 MLSD
用M-LSD直线控制稳定扩散。
模型文件:control_v11p_sd15_mlsd.pth
适合建筑物和室内空间
5 Canny
用Canny映射控制稳定扩散。
模型文件:control_v11p_sd15_canny.pth
6 Hed
用软边控制稳定扩散
模型文件:control_v11p_sd15_softedge.pth
跟Canny基本相似,都是边缘检测提取线稿,唯一的不同是,Canny提取的线稿边更锐利,Hed的线稿边缘更柔结果更加接近原图
7 scribble
使用涂写控制稳定扩散
模型文件:control_v11p_sd15_scribble.pth
8 seg
用语义分割控制稳定扩散。
模型文件:control_v11p_sd15_seg.pth
AI革新文字后,图像也是岌岌可危,微调模型的出现,是的训练也变得简单,未来AI的图像世界,可期!!
感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
资料软件免费放送
次日同一发放请耐心等待
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
需要的可以扫描下方CSDN官方认证二维码免费领取【保证100%免费】
**一、AIGC所有方向的学习路线**
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】