硬核：ControlNet是何方神圣，让AI模特摆出奇怪姿势

前阵子一共讲了四期关于Stable Diffusion 的各种参数介绍。今天简单介绍一个很好用的插件ControlNet。

我可以称这个插件为必备插件。拥有了这个插件，AI绘图不再混乱随机。

01 什么是ControlNet

ControlNet 作者：张吕敏，他是2021年本科毕业，目前正在斯坦福读博的中国人，为我们这位年轻同胞点赞。ControlNet 是作者提出的一个新的神经网络概念，就是通过额外的输入来控制预训练的大模型，比如 stable diffusion。这个本质其实就是端对端的训练，早在2017年就有类似的AI模型出现，只不过这一次因为加入了 SD 这样优质的大模型，让这种端对端的训练有了更好的应用空间。它很好的解决了文生图大模型的关键问题：单纯的关键词控制方式无法满足对细节精确控制的需要。

ControlNet利用条件生成对抗网络（CGAN）技术生成图像，与传统的生成对抗网络有所不同。它具备用户对生成图像进行精细控制的能力。这使得ControlNet广泛应用于计算机视觉、艺术设计、虚拟现实等多个领域。

这也就意味着，装上这个插件，学会这个插件后SD便可轻松地帮助我们绘制电商图，绘制建筑设计图，绘制室内装修图，甚至给漫画线稿上色，或者这些全部结合起来，用AI绘图制作游戏，等等。

废话不多说开始吧~

02、插件安装

第一步当然是插件安装。

如果用的是秋叶大佬的启动器，可以无视这一步，启动器里已经加载打包了哦（文末扫码可获取）

如果启动器里没有可以在WebUI 中 “扩展” ->“可下载” ->“加载扩展列表” 查找并安装。

其模型分为：ControlNet模型，和预处理模型

其预处理模型放在：SD安装目录/extensions/sd-webui-controlnet/models

03插件使用
先讲一下最简单的人物姿态约束。

通过这种方法，让AI模特摆出某个姿势变得非常容易

如果只用图生图来做的话，AI变得十分不配合。

如下图》

如何配置呢

第一行是我们可以选择的单元，单元数越多，对图片生成的约束越多，图片生成速度越慢。

第二行可以放入参考图片

第三行可以选择启用方式

第四行则是ControlNet主要的功能，这里我们准备做姿态控制所以选择的是Openpose,其他选择以后慢慢介绍

下一行预处理方式要与控制类型一致，模型要与控制类型一致，我箭头所指的地方是预览模式，可以生成预览图，姿态模型的预览图就是骨架图

接下来是控制权重及分辨率设置

下面这串英文就是分辨率设置，分辨率越高，约束模型越精准。当然显存要大才不会报错。

引导时机与前天提到的CLIP很相似，因为图片是一张纸叠加生成的，引导介入就是从第几张图开始插入ControlNet。从开始插入就是0，中间就是0.5，同理最后则用1 表示。终止时机也是这个道理。之前介绍过图片发散与收敛。这里的插入如果是一个收敛采样器则中间插入基本没有影响效果。所以插入的时机一般选择0到1。

04小结
今天简单介绍了一下ControlNet, 及Openpose模型，及插件的使用方法。
未来会有更多ControlNet的应用，毕竟它是万能插件哈哈哈哈，让AI可预测可使用，AI绘图真正的起点就在它。
文章使用的大模型、Lora模型、SD插件、示例图片等，都已经上传到我整理的 Stable Diffusion 绘画资源中。有需要的小伙伴文末扫码自行获取。

写在最后

AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。

感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

若有侵权，请联系删除