最新xinsir团队发布了一款名为controlnet-union-sdxl-1.0框架,这是一套全新的ControlNet架构,一款专为图像生成和编辑设计的控制模型,支持10余种ControlNet控制类型一体(本次发布ControlNetPlus集齐更多的CN功能一体化方案),在条件文本到图像生成中表现出色,并且能够生成视觉上与Midjourney相媲美的高分辨率图像。
1.介绍
ControlNet++采用设计了一种新架构:在基于原始ControlNet架构基础上,提出了两个新模块:
-
扩展原始ControlNet,使用相同的网络参数支持不同的图像条件。
-
在不增加计算负担的情况下,支持多种条件输入。这对于需要详细编辑图像的设计师来说尤其重要,不同的条件使用相同的条件编码器,无需添加额外的计算或参数。
研发团队通过在SDXL上进行了广泛的实验评估,展示了ControlNet++在控制能力和审美评分上都取得了优越的性能。
(需要的同学可以自行扫描获取)
再也不用为每个不同的 ControlNet 下载不同模型了!controlnet-union-sdxl同时支持了:
-
Openpose
-
Depth
-
Canny
-
Lineart
-
AnimeLineart
-
Mlsd
-
Scribble
-
Hed
-
Pidi(Softedge)
-
Teed
-
Segment
-
Normal
也支持不同 ControlNet 混合使用,妈妈再也不用担心我傻傻分不清楚了
#02
/案例展示
Openpose
深度 (Depth)
Canny
线稿 (Lineart)
动漫线稿 (AnimeLineart)
MLSD
涂鸦 (Scribble)
HED
Pidi(Softedge)
Teed
分割 (Segment)
法线 (Normal)
更多演示案例,请参见官方主页:https://huggingface.co/xinsir/controlnet-union-sdxl-1.0 。
#03
/安装部署
ComfyUI的最新版本已经实现了对ControlNet++的支持。为了确保您能顺利使用,请先更新ComfyUI至最新版本,并在其插件管理器中搜索“comfyui-art-venture”,完成该插件的安装。随后,加载本文末尾提供的工作流文件,您即可开启全新的使用体验。以下是您需要下载的相关模型列表:
- controlnet-union-sdxl-1.0:下载对应模型并放置在 /ComfyUI/models/controlnet/ 目录下。建议将diffusion_pytorch_model.safetensors 重命名为controlnet-union-sdxl-1.0.safetensors,便于后续管理。
插件地址为:https://github.com/sipherxyz/comfyui-art-venture.git
资料软件免费放送
次日同一发放请耐心等待
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。
需要的可以扫描下方CSDN官方认证二维码免费领取【保证100%免费】
**一、AIGC所有方向的学习路线**
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】