Stable Diffusion (Controlnet 安装与设置)

于 2024-07-31 15:18:06 发布
阅读量592 收藏 5
点赞数 8
文章标签： stable diffusion gpt 人工智能 AIGC AI作画
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/J708090/article/details/140823589
版权

Controlnet安装**😗*

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

秋叶整合包已经整合了Controlnet,所以不再说明安装方法.

Github版本安装Controlnet:

在这里插入图片描述

启动WebUI之后,选择扩展页面,再跳转之后的页面中选择可下载页面,点击加载扩展列表,在列表加载完成之后搜索"sd-webui-controlnet".点击搜索结果后面的安装.由于我这里已安装,所以显示的结果是已安装.

在这里插入图片描述

在确认安装完之后,返回到已安装页面,点击应用更改并重启.

Github Controlnet地址

在这里插入图片描述

在安装完成之后,在文生图和图生图的页面中都会出现controlnet的选项卡.这样controlnet这个插件就已经安装完成了.

目前安装完的controlnet还无法使用,controlnet同样也是需要下载对应使用的controlnet模型.

在这里插入图片描述

如果预处理器需要使用模型,那么在点击中间的爆炸图标会自动下载对应的预处理器使用的模型.

在这里插入图片描述

2.“stable-diffusion-webui\models\ControlNet”

在下载模型的时候要注意所需要下载的版本,如果基础模型使用的是SD1.5那么就需要配合1.5的ControlNet模型,如果基础模型使用的是SDXL那么就需要配合XL的ControlNet模型.

通常模型都会在文件名或者是项目名称上注明使用的版本,SD1.5通常会标注为sd15,SDXL版本通常都会注明XL.

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在设置中可以找到controlnet的参数设置,一般只会去调整controlnet单元数量.

在这里插入图片描述

单元数量也就是按上图所示的多个Controlnet单元,通常可以使用多个单元进行配合使用,但是需要注意的是使用的单元越多,那么要占用更多的显存和更多的时间.

根据本地机器合理使用Controlnet多个单元进行对画面的控制.

AI作品欣赏:

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。

感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。

在这里插入图片描述

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

图片

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！

在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。

在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

在这里插入图片描述

这份完整版的AIGC全套学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】在这里插入图片描述
AI想象家
关注
  • 8
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Stable Diffusion Controlnet V1.1 基础用法
Mr数据杨
05-01 4129
用于ControlNet和其他基于注入的SD控件的WebUI扩展。针对 AUTOMATIC1111 的网络用户界面的扩展，它可以让网络界面在原始的 Stable Diffusion 模型中添加条件来生成图像。这种添加是实时的，不需要进行合并。ControlNet 是一种神经网络结构，可以通过添加额外的条件来控制扩散模型。该扩展灵感来源于 kohya-ss/sd-webui-additional-networks。这个扩展对于需要控制扩散模型的用户来说是非常有用的。
Stable Diffusion Controlnet 1.0基础用法
Mr数据杨
03-06 2644
ControlNet是一种图像生成AI技术，可以在保持输入图像结构不变的情况下，将输入图像转换为另一幅图像，例如可以使用ControlNet来生成通过使用简笔画等3D模型来实现具有指定人物姿势和构图的插图。在这个过程中ControlNet可以从输入图像中提取轮廓、深度和分割等信息，并根据指令创建图像。因此可以使用ControlNet来将一张人物照片转换为一张美丽的插图，而不会改变人物的结构和特征。工作原理大致如下：ControlNet是一种可以控制大型预训练扩散模型以适应额外输入条件的技术。
stable diffusion 的controlNet 安装和使用
hjx_dou的专栏
04-25 887
controlNet耗内存应该挺高，我本地跑不起来，所以我直接在liblib里试验，liblib每天送300能量，大约能出100张图，随便用下足够了。下载了扩展以后，需要下载相应的模型，每个模型大约1.45G,可以按需下载。放了两个controlNet，其中一个选了涂鸦，第二个选了openPose。如果下载速度太慢，可以考虑去liblib下载，但是是全量模型。模型下载完后，把模型放到/models/ControlNet。重新刷新webUI，就可以看到相应的模型了。最后出的图和涂鸦里的姿势还算匹配。
stable-diffusion安装controlnet插件
Learning by doing
05-26 1164
stable-diffusion的controlnet插件安装
Stable Diffusion ControlNet 报 No module named ‘mmpose‘ Stable Diffusion ControlNet不显示
chen_XiaoFang的博客
08-05 960
把解压后的sd-webui-controlnet-main文件夹下所有文件复制到stable-diffusion-webui-master\extensions\sd-webui-controlnet中重启Stable Diffusion即可解决。Stable Diffusion ControlNet 报 No module named 'mmpose',Stable Diffusion ControlNet不显示。ControlNet安装后没有反应，不显示以下界面。
Stable Diffusion — ControlNet 超详细讲解
热门推荐
略懂……略懂……
09-07 1万+
ControlNet 是一个控制预训练图像扩散模型（例如 Stable Diffusion）的神经网络。它允许输入调节图像，然后使用该调节图像来操控图像生成。本文为大家深入剖析 ControlNet 的工作原理。
Stable Diffusion ControlNet 与艺术字
Funnyman_Ming的博客
01-04 550
sd画的图可控性并不高，尤其是文字，比如我们想让sd生成一个带有汉字“王炸”的条幅，sd会生成条幅，但是汉字都是有形体，但是内容是不对的，如图：ControlNet为解决这一问题作出了突出贡献。sd是一种UNet，包含编码和解码的过程，文生图的过程就是字转为带有语义信息的token，并逐步附加到sd的decoder过程中。ControlNet同样也是将输入转为向量，逐步添加到生成过程。
Stable Diffusion ControlNet 插件安装教程
ice829的博客
05-21 347
未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
Stable Diffusion 安装 Controlnet 插件
weixin_44132494的博客
08-25 140
插件地址：https://github.com/Mikubill/sd-webui-controlnet。本地打开stable-diffusion-webui\extensions文件夹，运行CMD,
Stable Diffusion ControlNet 完全指南
None
07-30 919
OpenPose有专门提取脸部特征，手部特征，关节，膝盖，脚踝以及以上特征的组合等多种模型。相比img2img，Depth2img 不仅能够利用 文本prompt，原来的图像，还可以使用原来图像的深度信息来控制图像的生成，也就是说，相比前者，他有3维参考信息。从上面示例，大家能够看到边缘检测器和OpenPose的一些区别，前者勾勒人物轮廓，目标图像会保留原图中的头发，衣服等轮廓，适合于一些富含边缘信息的主题和背景迁移，而后者更自由，它关注人物的关键姿势特征，但是不会保留那些衣服，头发等的轮廓信息。
Stable Diffusion WebUI Forge版ControlNet模型资源包下载
02-23
Stable Diffusion WebUI Forge版ControlNet模型资源包下载
Stable Diffusion教程 从入门到精通（下载地址）附安装包+安装文档.txt
07-19
18、Stable Diffusion 腾讯云安装部署教程之模型与插件 知识点：原生SD大模型和lora下载 SD插件下载 controlnet模型缺失下载和删除（独家脚本）.mp4 17、Stable Diffusion 腾讯云安装部署教程 知识点：腾讯云一键...
stable diffusion模型管理和controlnet最新支持SDXL模型下载.pdf
05-24
stable diffusion模型管理和controlnet最新支持SDXL模型下载
Stable Diffusion SDXL Beta 模型（中文版） .pdf
05-09
"Stable Diffusion SDXL Beta 模型（中文版）" 是一款正在开发中的先进人工智能图像生成模型。这款模型相较于之前版本，如 v1 和 v2.1，有着显著的改进和增强。SDXL 模型并非最终名称，它是一个更大、参数更多的模型...
stable diffusion 无报错
10-03
"stable diffusion 无报错" 是一个关于AI绘画技术的具体应用实例，特别是在图像处理和艺术创作领域的使用。这个描述提到的“AI绘画”是近年来快速发展的技术，它结合了人工智能和机器学习算法，使得计算机能够生成高...
Stable Diffusion基本原理通俗讲解
BuluAI的博客
07-23 1448
艺术家可以使用Stable Diffusion进行数字艺术创作，通过图生文技术获取关键词，再结合Controlnet插件进行图像的精准控制和风格化处理。
【Stable Diffusion】（基础篇五）—— 使用SD提升分辨率
最新发布
dao_cao_renshuai的博客
07-25 1259
在前期作画的时候，我有提到过，在第一次作画的时候图像分辨率不宜太高，因为过高的分辨率可能会爆显存，导致整个作画失败，但是分辨率低的图像质量不高，细节不够丰富，本文介绍如何使用AI提升图片分辨率
「AI绘画Stable Diffusion 零基础入门 」AI 绘画SD原理与工具介绍，万字详解新手入门必看！
A13531922961的博客
07-25 986
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。其实目前市面上大多数商业 AI 绘画工具，其实都是基于 SD 开发的，主要是因为在 SD 全面开源之后，在社区出现了大量丰富的模型，而且通过算法迭代，它将 AI 绘画的精细度提上了一个新的台阶，可以在民用级显卡的电脑上、并能在秒级时间内完成图片产出。当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。
【2024最新版】Stable diffusion汉化版安装教程（附SD安装包），一键激活，永久免费！
ice_55的博客
07-25 701
目前广泛使用的**Stable Diffusion Web UI简称(SDWebUI)**是发布在开源平台**Github**上的一个**Python**项目,与通常的软件安装方法不同,这个项目并不是下载并安装即可使用的应用程序,而是需要准备执行环境,编译源码.
stable diffusion controlnet 源码分析
10-12
stable diffusion controlnet是一个用于网络技术的源码，它主要用于实现网络中的扩散控制功能。扩散控制是指通过调整网络节点之间的通信速率，以实现网络资源的平衡利用和避免网络拥塞的技术。 源码分析是指对该源码进行深入的研究和解析。 首先，stable diffusion controlnet的源码可以从开源社区或者相关的资源库中获取。我们首先需要对源码进行编译和构建，确保可以成功地在我们的环境中运行。 然后，我们可以对源码的结构进行分析。通常，源码会包含多个文件和目录，其中主要包括各种类、函数和变量的定义和实现。我们需要仔细阅读每个文件和目录的功能和作用，了解它们之间的关联和调用关系。 在阅读源码的过程中，我们可以关注以下几点： 1. 网络扩散控制算法：源码中会实现网络扩散控制的核心算法。我们需要了解算法的原理和实现方式，以及它如何根据网络环境的变化来动态地调整节点之间的通信速率。 2. 数据结构：源码中通常会定义一些数据结构，用于存储和处理网络中的节点信息、拓扑结构和通信状态。我们需要了解这些数据结构的定义和使用方式，以及它们在算法中的作用。 3. 调度和控制逻辑：源码中可能会包含一些调度和控制逻辑，用于管理网络中各个节点的通信行为。我们需要分析这些逻辑的实现方式和策略，了解它们如何协调和控制节点之间的通信行为，以保证网络资源的平衡利用和避免拥塞。 4. 代码的可读性和健壮性：除了功能实现外，源码的可读性和健壮性也是需要关注的。我们可以评估源码的编码规范、注释和错误处理机制等方面，以确保代码的可维护性和稳定性。 总之，通过对stable diffusion controlnet源码的分析，我们可以深入了解网络扩散控制技术的实现方式和原理，为实际应用和二次开发提供参考和指导。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值