最近开源社区开源了一个用于图像生成和编辑的一体化 ControlNet++ 模型:controlnet-union-sdxl,可以说是升级版的 ControlNet 模型。
controlnet-union 将包括 Openpose、Depth、 Canny 在内的十余种常用的图像控制功能融合成了单一模型,不需要来回切换,一个模型基本可以搞定所有。
而且最新的 ProMax 版本,新增支持了 Inpaint 和 Tile,已经可以单一模型支持 12 个控制模型并支持 5 种高级编辑模式。
好了,话不多说,我们直接开整。
—
ComfyUI 已经对 controlnet-union 提供了适配,我们直接来 ComfyUI 中进行演示。
工作流我们就使用基础的 ControlNet 工作流就可以了。
controlnet-union 可以不需要 ControlNet 预处理器直接生图,当然也支持使用预处理器进行生图。
这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
】

演示中用到的工作流以及模型,听雨都会放在文末的网盘里,需要的小伙伴自取。
我们先来看看不使用预处理的效果,直接使用 controlnet-union 模型。
我们来转换下风格试试,转换一个 3D 可爱风吧。
提示词:Adorable 3D Character, 1girl, 3D render, adorable character, 3D art
效果以及细节迁移的都很不错。
来个稍微复杂一些的场景,效果也很不错,用来做风格迁移是很不错的选择哦!
提示词:(masterpiece), (best quality), (ultra-detailed), 1girl, illustration, disheveled hair, detailed eyes, perfect composition, moist skin, intricate details, earrings, by wlop
接下来,我们来看看使用预处理器的效果,这里不管选择哪个预处理器,
ControlNet 都不需要换哦,只需要使用 controlnet-union 一个就够了。
使用 openpose 预处理器,只保留人物的姿势,姿势迁移没问题。
提示词:steampunk style 1girl . antique, mechanical, brass and copper tones, gears, intricate, detailed
使用 Lineart 预处理器,效果也不错。
提示词:paper quilling art of . intricate, delicate, curling, rolling, shaping, coiling, loops, 3D, dimensional, ornamental
这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
】

使用 depth 预处理器,效果也没有问题。
提示词:minimalist style sofa . simple, clean, uncluttered, modern, elegant
其他预处理器就不一个一个贴了,小伙伴们自己去试试吧。
高级编辑模式现在 ComfyUI 还没有支持,小伙伴们也可以后续关注一下。
这里还有说一下,controlnet-union 模型总共就 2.5G,和其他的一个 SDXL ControlNet 模型的大小差不多,现在一个 controlnet-union 就可以当十几个 ControlNet 模型来用,不仅好用,还相当划算有么有!
给我们省了好多 G 的空间呢,多下载一些绘画大模型不香嘛!
这里推荐大家直接使用 ProMax 版本就可以了,这个是最新版。
好了,今天的分享就到这里了,感兴趣的小伙伴快去试试吧!
网盘链接:
https://pan.quark.cn/s/2145fc136437
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
对于0基础小白入门:
如果你是零基础小白,想快速入门AI绘画是可以考虑的。
一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案
包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍
👉stable diffusion新手0基础入门PDF👈
(全套教程文末领取哈)
👉AI绘画必备工具👈
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉AI绘画基础+速成+进阶使用教程👈
观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉12000+AI关键词大合集👈
这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
】
