stable diffusion 的controlNet 安装和使用

最新推荐文章于 2024-06-29 11:01:25 发布
最新推荐文章于 2024-06-29 11:01:25 发布
阅读量871 收藏 3
点赞数 6
分类专栏： stable diffusion 文章标签： stable diffusion
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hjx_dou/article/details/138202204
版权

stable diffusion 安装controlNet需要先下载扩展

扩展地址
下载了扩展以后，需要下载相应的模型，每个模型大约1.45G,可以按需下载。
模型地址

如果下载速度太慢，可以考虑去liblib下载，但是是全量模型
liblib

模型下载完后，把模型放到/models/ControlNet

重新刷新webUI，就可以看到相应的模型了
在这里插入图片描述
controlNet耗内存应该挺高，我本地跑不起来，所以我直接在liblib里试验，liblib每天送300能量，大约能出100张图，随便用下足够了。

随便找了个涂鸦图
在这里插入图片描述
在这里插入图片描述

放了两个controlNet，其中一个选了涂鸦，第二个选了openPose
最后出的图和涂鸦里的姿势还算匹配

在这里插入图片描述

hjx_dou
关注
  • 6
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【AI绘画】AI绘画真的太强悍了！Stable Diffusion + ControlNet 骨架分析，输出的高清大图让我大吃一惊. 附安装使用教程
禅与计算机程序设计艺术
03-03 2万+
【AI绘画】AI绘画真的太强悍了！Stable Diffusion + ControlNet 骨架分析，输出的高清大图让我大吃一惊. 附安装使用教程
Stable Diffusion进阶！姥姥都能看懂的ControlNet超全教程
winkexin的博客
05-10 1867
珍珠白的墙壁，温莎灰色的地板，卧室，自然光，朴实的色调，简单干净，室内设计的趋势，由 Audrey kawasaki 设计的数字艺术品，光滑，细节，艺术站，中性色，优雅。女孩，独奏，连衣裙，辫子，发带，耳环，微笑，棕色眼睛，白色连衣裙，现实主义，珠宝，长发，黑发，看着观众，裸露的肩膀，嘴唇，蓝色发带，单发带，棕色头发，简单的背景。女孩，独奏，微笑，现实，咧嘴笑，看着观众，棕色的眼睛，棕色的头发，马尾辫，上身，简单的背景，xxx，xx，蓝色的背景，牙齿，嘴唇，裸露的肩膀，长发，黑发。
Stable-Diffusion和ControlNet插件安装全过程,以及使用心得汇总.
热门推荐
weixin_45643107的博客
03-22 2万+
Stable-Diffusion和ControlNet插件安装全过程,以及使用心得汇总.
Stable Diffusion教程|Controlnet插件详解和实战
2401_84830464的博客
05-09 1928
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
Stable Diffusion 插件 Controlnet 安装使用教程（图像精准控制）
m0_74942241的博客
06-28 2386
Stable Diffusion WebUI 的绘画插件 Controlnet 最近更新了 V1.1 版本，发布了 14 个优化模型，并新增了多个预处理器，让它的功能比之前更加好用了，最近几天又连续更新了 3 个新 Reference 预处理器，可以直接根据图像生产风格类似的变体。
stable-diffusion安装controlnet插件
Learning by doing
05-26 1163
stable-diffusion的controlnet插件安装
【进阶】Stable Diffusion 插件 Controlnet 安装使用教程（图像精准控制）
最新发布
AA1213888的博客
06-29 1116
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
Stable Diffusion WebUI Forge版ControlNet模型资源包下载
02-23
Stable Diffusion WebUI Forge版ControlNet模型资源包下载
stable diffusion模型管理和controlnet最新支持SDXL模型下载.pdf
05-24
stable diffusion模型管理和controlnet最新支持SDXL模型下载
Stable Diffusion教程 从入门到精通（下载地址）附安装包+安装文档.txt
07-19
18、Stable Diffusion 腾讯云安装部署教程之模型与插件 知识点：原生SD大模型和lora下载 SD插件下载 controlnet模型缺失下载和删除（独家脚本）.mp4 17、Stable Diffusion 腾讯云安装部署教程 知识点：腾讯云一键...
AI绘画教程 Stable Diffusion中如何安装使用不同的模型？
05-29
AI绘画教程 Stable Diffusion 中如何安装使用不同的模型？ AI绘画教程 Stable Diffusion 中如何安装使用不同的模型？ Stable Diffusion 是开源的，有点像安卓；midjourney 则是封闭的，有点像苹果。两者功能都很...
Stable Diffusion SDXL Beta 模型（中文版） .pdf
05-09
总的来说，Stable Diffusion SDXL Beta 模型代表了人工智能图像生成技术的最新进展，为用户提供了更高质量和多样化的图像生成体验。随着模型的持续训练和完善，可以期待其在未来的表现更加出色。
一步步带你解锁Stable Diffusion：ControlNet 保姆级入门介绍
weixin_72959097的博客
01-26 3689
以下是 OpenPose 支持的预处理器，以及每个预处理器对应的功能，这里重点讲一下 dw_openpose_full 预处理器，这个是最近刚更新的 OpenPose 预处理器，是 openpose_full 的升级版本，识别姿势方面比 openpose_full 更精确。配合提示词「room」，最终出图效果，是不是很 nice ，你还可以调整不同的提示词来得到你想要的效果，设置自己想要的风格，比如你可以在提示词中加入中式风格，欧式风格，简约风格等等。小伙伴们可以根据自己的需求选择不同的线稿提取方式。
Stable Diffusion中ControlNet和OpenPose的安装教程
暂时先用这个名字
04-04 1万+
ControlNet 是一种神经网络结构，通过添加额外条件来控制扩散模型。它将神经网络块的权重复制到“锁定”副本和“可训练”副本中。“可训练”的人会了解您的病情。“锁定”的模型将保留您的模型。因此，使用图像对的小数据集进行训练不会破坏生产就绪的扩散模型。“零卷积”是 1×1 卷积，权重和偏差都初始化为零。在训练之前，所有零卷积都输出零，ControlNet 不会造成任何失真。没有一个层是从头开始训练的。你还在微调。您的原始模型是安全的。这允许在小规模甚至个人设备上进行培训。
Stable Diffusion - 图像控制插件 ControlNet (OpenPose) 配置与使用
Mystra
07-07 6653
ControlNet 是神经网络结构，用于控制预训练的大型扩散模型，以支持额外的输入条件。ControlNet 以端到端的方式学习任务特定的条件，即使训练数据集很小（< 50k），学习也是稳健的。此外，训练一个 ControlNet 和微调一个扩散模型一样快，而且，模型可以在个人设备上训练。或者，如果有强大的计算集群可用，模型可以扩展到大量（百万到十亿）的数据。Stable DIffusion 这样的大型扩散模型可以用 ControlNets 来增强，以实现条件输入，如边缘图、分割图、关键点等。
AI绘图软件Stable Diffusion 安装和使用之二controlnet插件
Xiaok的专栏
09-06 1299
最近人工智能发展非常快，特别是机器学习方面，比如AI绘图就是通过机器学习训练生成模型，然后在模型的基础生成同模型的风格化照片。在网络上随便找一张好看的图片，比如下图，点击“DeepBooru反推”按钮，本图的提示词就会生成在左边文本框中。将刚才生成的提示词放在文生图的提示词框中，点击“生成”按钮，生成的成果图见下图。将生成的提示词放在文生图的提示词框中，点击“生成”按钮，重新生成的成果图见下图。点击“生成”按钮，生成的效果如下图，仿佛一颗冉冉升起的新星，帅呆了。点击“生成”按钮，生成线稿图如下。
AI 绘画Stable Diffusion 研究（二）sd模型ControlNet1.1 介绍与安装
w风雨无阻w的专栏
07-29 5782
ControlNet1.1 是Stable Diffusion 绘画插件，在2023年4月份更新了 V1.1 版本，发布了14 个优化模型，并新增了多个预处理器，并且在原有的模型上进行了一些优化，让它的功能比之前更加好用了。shuffle模型可以称为重组模型，从shuffle模型的是使用效果来看，shuffle模型可以通过获取原图的风格后借助这个风格进行新的图片生成，所以当我们找到比较好的参考图时，就可以使用shuffle模型进行图片创作。下一篇，将给大家带来，sd 各个功能模块的详细使用方法，敬请期待。
超强满血不收费的AI绘图教程来了（在线Stable Diffusion一键即用）
ith321的博客
10-24 7385
超强满血不收费的AI绘图教程来了（在线Stable Diffusion一键即用）
stable diffusion controlnet 源码分析
10-12
stable diffusion controlnet是一个用于网络技术的源码，它主要用于实现网络中的扩散控制功能。扩散控制是指通过调整网络节点之间的通信速率，以实现网络资源的平衡利用和避免网络拥塞的技术。 源码分析是指对该源码进行深入的研究和解析。 首先，stable diffusion controlnet的源码可以从开源社区或者相关的资源库中获取。我们首先需要对源码进行编译和构建，确保可以成功地在我们的环境中运行。 然后，我们可以对源码的结构进行分析。通常，源码会包含多个文件和目录，其中主要包括各种类、函数和变量的定义和实现。我们需要仔细阅读每个文件和目录的功能和作用，了解它们之间的关联和调用关系。 在阅读源码的过程中，我们可以关注以下几点： 1. 网络扩散控制算法：源码中会实现网络扩散控制的核心算法。我们需要了解算法的原理和实现方式，以及它如何根据网络环境的变化来动态地调整节点之间的通信速率。 2. 数据结构：源码中通常会定义一些数据结构，用于存储和处理网络中的节点信息、拓扑结构和通信状态。我们需要了解这些数据结构的定义和使用方式，以及它们在算法中的作用。 3. 调度和控制逻辑：源码中可能会包含一些调度和控制逻辑，用于管理网络中各个节点的通信行为。我们需要分析这些逻辑的实现方式和策略，了解它们如何协调和控制节点之间的通信行为，以保证网络资源的平衡利用和避免拥塞。 4. 代码的可读性和健壮性：除了功能实现外，源码的可读性和健壮性也是需要关注的。我们可以评估源码的编码规范、注释和错误处理机制等方面，以确保代码的可维护性和稳定性。 总之，通过对stable diffusion controlnet源码的分析，我们可以深入了解网络扩散控制技术的实现方式和原理，为实际应用和二次开发提供参考和指导。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值