xinsir团队最新发布了ControlNet-Union-SDXL-1.0框架。这套创新的ControlNet架构专为图像生成与编辑设计,整合了10余种ControlNet控制类型(本次发布的ControlNetPlus实现了更全面的功能集成)。该框架在条件文本到图像生成领域表现优异,能够产出媲美Midjourney的高分辨率图像。
1.介绍
ControlNet++采用设计了一种新架构:在基于原始ControlNet架构基础上,提出了两个新模块:
-
扩展原始ControlNet,使用相同的网络参数支持不同的图像条件。
-
在不增加计算负担的情况下,支持多种条件输入。这对于需要详细编辑图像的设计师来说尤其重要,不同的条件使用相同的条件编码器,无需添加额外的计算或参数。
研发团队通过在SDXL上进行了广泛的实验评估,展示了ControlNet++在控制能力和审美评分上都取得了优越的性能。
Github代码库 、 模型下载地址(文末可自行扫描获取)
再也不用为每个不同的 ControlNet 下载不同模型了!controlnet-union-sdxl同时支持了:
-
Openpose
-
Depth
-
Canny
-
Lineart
-
AnimeLineart
-
Mlsd
-
Scribble
-
Hed
-
Pidi(Softedge)
-
Teed
-
Segment
-
Normal
也支持不同 ControlNet 混合使用,妈妈再也不用担心我傻傻分不清楚了
2.案例展示
Openpose
深度 (Depth)
Canny
线稿 (Lineart)
动漫线稿 (AnimeLineart)
MLSD
涂鸦 (Scribble)
HED
Pidi(Softedge)
Teed
分割 (Segment)
法线 (Normal)
更多演示案例,请参见官方主页:https://huggingface.co/xinsir/controlnet-union-sdxl-1.0 。
3.安装部署
ComfyUI的最新版本已经实现了对ControlNet++的支持。为了确保您能顺利使用,请先更新ComfyUI至最新版本,并在其插件管理器中搜索“comfyui-
art-venture”,完成该插件的安装。随后,加载本文末尾提供的工作流文件,您即可开启全新的使用体验。以下是您需要下载的相关模型列表:
- controlnet-union-sdxl-1.0:下载对应模型并放置在 /ComfyUI/models/controlnet/ 目录下。建议将diffusion_pytorch_model.safetensors 重命名为controlnet-union-sdxl-1.0.safetensors,便于后续管理。
(需要comfyui最新版的小伙伴可以文末自行扫描获取)
资料软件免费放送
次日同一发放请耐心等待
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
对于0基础小白入门:
如果你是零基础小白,想快速入门AI绘画是可以考虑的。
一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案
包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍
👉stable diffusion新手0基础入门PDF👈
(全套教程文末领取哈)
👉AI绘画必备工具👈
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉AI绘画基础+速成+进阶使用教程👈
观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉12000+AI关键词大合集👈
这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
】
