文生图生产力工具大升级：ControlNetPlus重新定义AI图像生成，一个模型包含17种能力！不用怕爆显存和硬盘了

大家好我是安琪！！！自从Controlnet发布以来，Stable Diffusion真正成为生产力工具，而不只是爱好者们用来画“老婆”的玩具。然而随着Controlnet功能的增多，像Openpose这样的每一个功能就需要下载一个模型，更不用说还有其他衍生模型。我看了一下我的Controlnet文件夹，已经突破40G了。

Xinsir团队刚发布的ControlNetPlus是对Controlnet架构的重大升级，这是适用于图像生成和编辑的一体化ControlNet，简单点说就是现在一个模型就可以干原来Controlnet十几个模型的工作。

ControlNetPlus 是基于ControlNet架构开发的全新升级版本，它突破性地用一个模型支持12种控制类型和5种高级编辑功能，并且在不增加计算负担的情况下支持多个条件输入，不同条件使用相同的条件编码器，无需增加额外的计算或参数。也就是说现在用Openpose+Canny来联合控制图像生成，不用再像以前那样担心爆显存了，这对于希望详细编辑图像的设计师尤其重要。

Xinsir团队在SDXL模型上进行了彻底的实验，在控制能力和美学评分方面均表现出色。并能够生成与Midjourney视觉上相媲美的高分辨率图像。你再也不用为了不同的控制需求而下载或切换不同的模型，ControlNetPlus 一款模型就能满足你所有的需求！

网络架构：

ControlNetPlus 的优势：

1、使用类似 novelai 的桶训练，可以生成任意长宽比的高分辨率图像

2、使用大量高质量数据（超过10000000幅图像），数据集涵盖了多样化的情况

3、使用类似 DALLE.3 的重新字幕提示，使用 CogVLM 生成详细描述，具有良好的提示跟踪能力

4、在训练过程中使用许多有用的技巧。包括但不限于日期增强、多重损失、多分辨率

5、使用与原ControlNet几乎相同的参数，网络参数和计算量没有明显增加。

6、支持10+控制条件，与单独训练相比，任何单一条件的性能均无明显下降

7、支持多条件生成，在训练过程中学习条件融合。无需设置超参数或设计提示。

8、与其他开源 SDXL 模型兼容，例如 BluePencilXL、CounterfeitXL。与其他 Lora 模型兼容。

五个高级编辑功能视觉示例

Tile Deblur去模糊

Tile variation多样性

Tile Super Resolution超分辨率

1M 分辨率 --> 9M 分辨率

Image Inpainting图像重绘

Image Outpainting图像扩展

十二个Controlnet控制视觉示例

Openpose姿态控制

Depth深度控制

Canny线稿控制

Lineart线条艺术

AnimeLineart动漫线条

Mlsd 直线边缘检测器

Scribble涂鸦

Hed (SoftEdge Lines)软边缘线条

Pidi(SoftEdge)软边

Teed高分辨率细线条

Segment区块分割

Normal 法线图

多控制视觉示例

Openpose + Canny

Openpose + Depth

Openpose + Scribble

Openpose + Normal

Openpose + Segment

ControlNetPlus已经无缝接入SD Webui和Comfyui。

Webui需要更新sd-webui-controlnet插件到最新版本，然后下载最新的ProMax模型到Controlnet模型文件夹。可以在Extensions栏中选择从网址安装“https://github.com/Mikubill/sd-webui-controlnet.git”。

也可以选择更新。

Comfyui也需要更新到最新版本，下载模型到Controlnet模型文件夹。导入工作流，安装缺失的插件。

我自己做一个ControlNetPlus基础工作流，用哪个控制就连哪个控制的节点，很傻很简单但不容易出错。

推荐社区大佬的工作流，简单方便。直接就可以选控制类型，不用像我那个工作流还有傻傻的换节点。

我把ControlNetPlus和几个工作流都放在文末了可以文末自行扫描获取

资料软件免费放送

次日同一发放请耐心等待

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

需要的可以扫描下方CSDN官方认证二维码免费领取【保证100%免费】

**一、AIGC所有方向的学习路线**

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

这份完整版的学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】