【第9章】Stable Diffusion WebUI ControlNet SDXL官方案例演示（6款功能/安装/使用/推荐参数/硬件要求/预处理器/模型）

最新推荐文章于 2024-08-29 09:45:00 发布
最新推荐文章于 2024-08-29 09:45:00 发布
阅读量1k 收藏 2
点赞数
分类专栏： StableDiffusion系统基础课 文章标签： stable diffusion 人工智能 计算机视觉 语言模型 自然语言处理 图像处理 AI作画
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/JuMengXiaoKeTang/article/details/134243374
版权
本文介绍了如何在Stable Diffusion WebUI中使用ControlNet for SDXL版本，包括安装、模型下载、硬件要求以及六个官方示例，涉及深度模型、边缘检测、图像校订等应用。用户需确保WebUI和ControlNet版本匹配，并根据显存大小调整设置。
摘要由CSDN通过智能技术生成

开始本章节之前，建议先完成【第7章】ControlNet基础知识 和【第8章】ControlNet1.1专题的学习。

使用ControlNet for SDXL版本的前提条件

  1. WebUI 本体：升级到1.6.0及以上

  2. ControlNet插件：升级到 1.1.400及以上

  3. 大模型：已安装SDXL1.0的两个大模型（base模型、refiner模型）

  4. CN模型：已安装ControlNet SDXL版模型

注意！SDXL模型在使用中需要遵循“版本匹配”的问题，即：使用过程中“大模型”与“ControlNet的模型”，都必须同时是SDXL版本

了解本专栏 订阅专栏 解锁全文
聚梦小课堂
关注
专栏目录
订阅专栏
stable-diffusion-webui中stability的sdv1.5和sdxl模型结构config对比
liguandong
10-17 1184
generative-models中sgm代码结构和ldm一致，models下面是整体代码流程，modules下是具体的模块代码。models是串起全流程的代码，比如DDPM，modules下的是具体的模块代码。
Stable Diffusion WebUI 控制网络 ControlNet 插件实现精准控图-详细教程
水滴的博客
04-17 9712
ControlNet（控制网络）是一种先进的神经网络架构，它为基于扩散模型的 AI 绘画流程引入了精确的控制机制。通过整合额外的条件约束，ControlNet 显著增强了图像生成的可预测性和指导性。在 ControlNet 的辅助下，用户能够对生成的艺术作品进行细致入微的指导，实现对构图、色彩、风格等多维度因素的把控，从而满足各种复杂场景和个性化需求。这一技术为 AI 绘画领域带来了革命性的突破，使得 AI 绘画能够更好地满足用户的具体需求，成为一种真正的生产力工具。项目链接地址论文。
AI绘画：SDXL版ControlNet模型和使用方法！
托尼不是塔克
08-24 4351
SDXL是目前最强的AI绘画基础模型，直接加载模型，就可以生成不错的效果。但是它有一个致命的问题，就是不支持ControlNet。在AI绘画中，ControlNet是一个非常重要的工具。有了它，就可以生成更加可控精准的图片。ControlNet的用途非常多，比如，控制人物姿势、线稿上色、动漫变真人、艺术二维码，光影字、ailogo...好消息是，SDXL终于也支持了Controlnet。虽然只有一个canny模型，但是至少是能用了。
超级好用的 SDXL-ControlNet 模型：Anytest，不止是线稿转绘，还能帮你补全线稿以及二创哦！
最新发布
WANGJUNAIJIAO的博客
08-29 2269
今天给小伙伴们介绍一个 SDXL-ControlNet，万能：Anytest，操作很简单，不需要，直接使用即可。基础的功能包括根据线稿生成图像，对图片进行风格转绘，这个没啥好讲的。Anytest 有几个有趣的用法，针对轮廓不明显的构图，也可以生成质量不错的图片。不仅如此，Anytest 还可以帮你完善不完整的草图，包括在图片上进行二创。这么讲小伙伴们可能没有太大感觉，我们直接看效果吧！我们还是在 ComfyUI 中进行演示，工作流就是基础的 ControlNet 工作流。
【Stable Diffusion】来了来了！属于SDXL的ControlNet模型它终于来了！
2401_85688943的博客
07-08 1462
千呼万唤始出来！就在昨天，WebUI的ControlNet1.1.4版本终于更新，这次的更新支持了SDXL1.0的模型。我怀着兴奋的心情，打开了网站开始下载模型。这次总共出了四种控制类型，分别是Canny、Depth、Sketch和Openpose。来到Hugging Face的网址：https://huggingface.co/lllyasviel/sd_control_collection/tree/main。
stablediffusion的controlnet线稿只能用1.5的底模吗，有XL能用的线稿模型吗？
2301_80239908的博客
06-18 1179
想要动漫人物或者线稿人物转真人也可以的，找一个支持真实人像的大模型就可以了，不过 V3 看着还是有点像动漫风格，V4 的真实人像风格就比较明显了，从这里看 V4 的泛化性更好一些。即使是很粗糙的人物轮廓，Anytest 也可以很好的绘制出人物以及场景，不过这里需要注意的是，图片中的人物细节以及场景的细节尽量在提示词中有所体现，要不然效果不太好哦！版本的，可以看到模型的名字中有 am 和 pn 之分，am 代表是动漫大模型，pn 代表是以 Pony 为基础模型炼制的大模型，小伙伴们按需下载就可以了。
Diffusers代码学习-ControlNet(SDXL）
duhaining1976的博客
06-12 991
AIGC研究及应用系列
Stable Diffusion WebUI Forge版ControlNet模型资源包下载
02-23
Stable Diffusion WebUI Forge版ControlNet模型资源包下载
stable diffusion模型管理和controlnet最新支持SDXL模型下载.pdf
05-24
### Stable Diffusion 模型管理与 ControlNet 支持 SDXL 模型解析 #### 一、模型管理小技巧 **1.1 中文文件夹 ModelS 的优势** - **查看方便**：用户可以通过设置中文文件夹的方式进行模型管理，这使得在浏览不同...
【第5章】Stable Diffusion大模型（简介/两种版本/安装/模型推荐/使用方式）ComfyUI基础入门教程
聚梦小课堂
06-12 1051
ComfyUI大模型教程，内容涵盖：什么是大模型？都有哪些版本？如何下载？如何安装？如何共用模型？不同风格的大模型推荐...
SDXL ControlNet - 简易安装指南
OlivioSarikas的博客
08-12 745
这段文字介绍了如何在 Stable Diffusion XL 中使用 ControlNet 进行图像生成。文章主要介绍了以下步骤： 1. 下载 ControlNet 模型文件： 作者提供了一个包含 ControlNet 模型的 JSON 文件下载链接，其中包含 Kenny 和 DepthMap 两种方法的 ControlNet 模型。 用户需要下载并将其放置在 ConfUi 文件夹下的 mode...
一个新的 SDXL Controlnet 线条模型 MistoLine
hjx_dou的专栏
05-19 236
能够应对各种类型的线条艺术作品，无论是手绘草图、不同的 ControlNet 线预处理工具，还是由模型生成的轮廓，都能高精确性和稳定地处理。一个重要特点是其泛化能力极强，无需针对不同的线预处理工具更换不同的 ControlNet 模型。一个新的 SDXL Controlnet 线条模型 MistoLine。
controlnet-union-sdxl：同时支持所有 ControlNet
weixin_51674085的博客
07-09 716
也支持不同 ControlNet 混合使用，妈妈再也不用担心我傻傻分不清楚了。再也不用为每个不同的 ControlNet 下载不同模型了！
ControlNetPlusProMax来袭：SDXL可控性灵魂CN组件再升级，多合一组件再添新功能
2401_85725028的博客
07-22 1183
大家好我是安琪！！！在数字图像生成领域，ControlNetPlusProMax的推出无疑是一次重大突破。作为SDXL的可控性灵魂CN组件的升级版，ControlNetPlusProMax在多合一组件的基础上，增添了更多实用新功能，为你的创意绘画之旅带来更多可能性。ControlNetPlus再次大升级，发布了最新的版本。在本次的和两个功能组件。
探索艺术新境界：MistoLine - 全能且稳定的SDXL-ControlNet模型
gitblog_00021的博客
05-31 501
探索艺术新境界：MistoLine - 全能且稳定的SDXL-ControlNet模型 MistoLine A Versatile and Robust SDXL-ControlNet Model for Adaptable Line Art Conditioning ...
一分钟教会你！ComfyUI高清分辨率可控图像增强模型！
小王的储物间
07-01 2183
大家好我是小王！！！近日模型更新到 V2 版本了，这是一款现实逼真绘图 Controlnet 插件模型，适用于熟知的 SD-WebUI 扩展和 ComfyUI 工作流。本次 V2 版本的更新，在模型的稳定性和控制力得到了显著的提升，同时能够在高清分辨率时更多的精细的图像细节增强。•：通过大幅改进的训练数据集和更广泛的训练步骤，Tile V2 得到了显著的增强。•：Tile V2 现在无需明确的提示，也能够自动识别的更广泛的对象。•。
SDXL Controlnet Tile V2模型发布：高清分辨率图像处理，效果爆炸
nulifancuoAI的博客
04-22 2536
SDXL Controlnet Tile V2模型的最新更新为图像处理领域带来了突破性的技术提升。这一版本不仅在功能上进行了全面优化，还针对用户体验进行了显著改进。Huggingface模型下载：AI快站模型免费加速下载：TTPlanet最新TileV2：通过大幅改进的训练数据集和更广泛的训练步骤，Tile V2 得到了显著的增强。自动识别范围扩大：Tile V2 现在无需明确的提示，也能够自动识别的更广泛的对象。色彩偏移问题显著改善。
高清分辨率、更灵活可控的图像增强模型SDXL ControlnetTileV2 来啦！(ComfyUI使用指南)
A1353192296的博客
08-05 989
大家好，我是画画的小强。今天给大家分享一款现实逼真绘图 Controlnet 插件模型，适用于熟知的 SD-WebUI 扩展和 ComfyUI 工作流。本次 V2 版本的更新，能够在高清分辨率时更多的精细的图像细节增强。可以被用于在图像放大过程增强图片细节质量，同时配合合适的ComfyUI工作流程节点，也可以实现高细节、高分辨率图像修复，以及实现改变图片的风格。
stable diffusion+webui+chilloutmix/controlnet
09-17
总的来说，Stable Diffusion WebUI ChilloutMix/ControlNet是一款稳定可靠、功能丰富的网络用户界面，能够有效地管理和控制ChilloutMix/ControlNet系统。它提供了直观和易于使用的界面，具有多种功能，可以满足用户...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

聚梦小课堂

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值