Stable Diffusion绘画 | ControlNet应用-Scribble (涂鸦)

最新推荐文章于 2024-12-03 09:31:30 发布
最新推荐文章于 2024-12-03 09:31:30 发布
阅读量278 收藏 6
点赞数 4
文章标签： stable diffusion AI作画 开源 人工智能 AI绘画
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_58477260/article/details/141331124
版权

Scribble (涂鸦)

使用该算法生成的线稿，线条最粗最随意，常用于抓取画面的大体轮廓，让AI进行创意发挥。

提示词输入 a panda，生成图片如下：

将提示词换成 a dog，生成图片如下：

今天先分享到这里~

写在最后

感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。

AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
 
在这里插入图片描述

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。
在这里插入图片描述

若有侵权，请联系删除
〔008〕Stable Diffusion 之 ControlNet 篇
国内某知名游戏公司小菜鸡工程师
06-06 1885
让AI绘画向生产力工具进步的神级工具
Stable Diffusion WebUI 控制网络 ControlNet 插件实现精准控图-详细教程
热门推荐
水滴的博客
04-17 1万+
ControlNet（控制网络）是一种先进的神经网络架构，它为基于扩散模型的 AI 绘画流程引入了精确的控制机制。通过整合额外的条件约束，ControlNet 显著增强了图像生成的可预测性和指导性。在 ControlNet 的辅助下，用户能够对生成的艺术作品进行细致入微的指导，实现对构图、色彩、风格等多维度因素的把控，从而满足各种复杂场景和个性化需求。这一技术为 AI 绘画领域带来了革命性的突破，使得 AI 绘画能够更好地满足用户的具体需求，成为一种真正的生产力工具。项目链接地址论文。
Stable Diffusion｜黑白老照片修复
xiaolinyui的博客
05-24 896
在这个时代，我们习惯于拥有高清、色彩丰富的照片，然而，那些古老的黑白色老照片由于年代的久远，往往会出现模糊、破损等现象。
AI绘画︱每日咒语提示词0312-2
qq_41314882的博客
03-13 1780
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
AI绘图的场景应用：文生图、图生图
qq_41314882的博客
03-15 5274
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
刚刚！Stable diffusion 2024升级加强版终于来了！（无需安装，解压即用）
m0_71744960的博客
06-26 1858
要说AI绘画圈最出圈的工具那妥妥的就Stable diffusion这不前段时间2024升级加强版来咯！不仅生成图片还能生成视频\数字人等而且无需安装，直接解压就能用Stable Diffusion 是以文本生成图像的 AI 工具，不仅可以在线使用，还能部署在家用电脑上的 AI 绘图工具，可以在大部分后期电脑下运行，并在短短几秒钟内生成清晰度高，还原度佳的 AI 图片，无需预处理和后处理！这里直接将该软件分享出来给大家吧~
【stable diffusion安装包】Stable Diffusion汉化版安装教程（附最新SD安装包+教程），一键激活，永久免费！
2401_84760322的博客
11-15 957
【2024最新版】Stable Diffusion汉化版安装教程（附最新SD安装包+教程），一键激活，永久免费！Ai时代的到来？还是Ai时代是个笑话？今年的失业潮，裁员潮；起初我并不以为然，直到今年铺天盖地的AI新闻出现。比如央视用AI播新闻了 ↓还有影视行业，全球首部AI制作的电影【OurT2 Remake】，整个剧本、剪辑、配乐环节都是由AI包办的；AI比想象中要更快的应用到数字媒体生产行业之中，也不断地反应我们人类的生产在不断被挑战；
Stable Diffusion插件篇 ControlNet
AA1213888的博客
07-24 1292
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
2024最新controlnet详解：Scribble（涂鸦）
Yu91an的博客
06-30 916
Scribble 也可以用来处理真实的图片，与Canny、Lineart、SoftEdge相比，最大的变化就是，构图会发生一些变化，而且它没有对图片深度的处理。
【第7章】Stable Diffusion WebUI ControlNet基础速成（安装/升级/简介/类别/功能/效果速览）
聚梦小课堂
11-06 693
Stable Diffusion ControlNet基础知识点介绍，包括：安装与升级方式、功能简介、基础实现方式、CN的5大类别、各自的功能、效果速览等。学完本章，你将对SD绘画的可控性有一个全面的认知，为创作出可控的AI作品打下基础。
【2024最新版】Stable diffusion汉化版安装教程（附SD安装包），一键激活，永久免费！
m0_64365896的博客
12-03 375
其实，安装SD的过程并不复杂，只需按照简单的步骤操作，几分钟内就能完成安装，不论是Windows系统还是Mac系统，都能轻松应对。
SD下载安装教程，学习AI绘画软件必看（SD怎么安装，SD安装教程，安装stable diffusion软件必看）
m0_74942241的博客
07-29 993
一款是广为人知的Midjourney（简称MJ），另一款则是备受瞩目的Stable Diffusion（简称SD）。 这两款软件的核心共同点在于，它们都是通过用户输入的关键词等信息来生成画作。 MJ目前采取的是付费模式，用户需要支付一定的费用才能使用其服务（一个月10美元） 相比之下，SD，它不仅功能强大，而且无需任何费用，这对于仅仅想尝试或偶尔使用AI绘画功能的普通用户来说，可能是最合适的选择。
AI绘画入门实践 | Midjourney：画面权重控制
Leo-Fighting的博客
07-23 1117
在 Midjourney 中，使用两个连续的英文冒号。权重范围：从 上一个双冒号 到 下一个双冒号 之间。后面加上数字，可以调整提示词的权重。表示让 MJ 将部分提示词单独考虑。来进行分割与权重控制。在提示词中添加双冒号。你也来动手试一下吧~
Stable Diffusion汉化插件
BBM的博客
01-04 7082
今天为大家介绍Stable Diffusion的两种UI汉化包，一种是汉化包，就中文界面，方便大家对于繁杂的参数的模型的操作，一种是中英文对照界面，在中文提示下，同时显示英文，不但方便设置也同时学习了英文单词。就如下面这个界面：
手把手带你入门本地AI绘画（Stable Diffusion）
何小成的成长记录
12-29 1818
stable diffusion是一种基于扩散过程的图像生成模型，可以生成高质量、高分辨率的图像。它通过模拟扩散过程，将噪声图像逐渐转化为目标图像。这种模型具有较强的稳定性和可控性，可以生成多样化效果和良好视觉效果的图像。说人话，就是它能稳定生成可控图像。
【Stable Diffusion】 界面汉化 | 如何安装简体中文语言包
canadajasminestudio的博客
08-09 760
Stable Diffusion 安装简体中文语言包，将界面变成简体中文，详细操作步骤
03-Stable Diffusion 汉化
qq_42160304的博客
03-28 683
通常在下载安装好Stable Diffusion之后，我们会对它进行汉化操作如果还没有安装好，那么可以参考安装好的Stable Diffusion，界面是英文展示的，想要改为中文，可以使用插件的方式来实现。
零基础也能看得懂的AI绘画教程！灵魂画师MJ咒语案例展示！
qq_41314882的博客
03-12 1691
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
Stable Diffusion如何通过ControlNet提升出图一致性？[^4]
最新发布
03-29
<think>好的，用户想知道如何通过ControlNet提升Stable Diffusion生成图像的一致性。我需要先回忆ControlNet的基本原理和它在Stable Diffusion中的作用。ControlNet通过添加额外的条件控制，比如边缘检测、姿态估计等，来引导生成过程，这样生成的图像会更符合用户输入的结构或风格。 首先，得解释ControlNet的工作原理。它通过训练一个并行的网络结构，将控制条件（如线稿、深度图等）与原有的扩散模型结合，确保生成图像在结构和内容上与输入条件一致。这部分可能需要引用文献中的内容，比如引用[1]提到的Stable Diffusion XL的优化，或者引用[2]中关于MLSD线条检测的应用。 然后，用户关心的是方法。我需要列出具体的操作步骤，比如选择合适的控制类型、调整控制权重和终止时机。例如，引用[3]提到调整Control Weights和Ending Control Steps，这可能影响生成结果的一致性。此外，引用[4]中提到的安装和配置ControlNet的步骤也需要提及，确保用户知道如何在Web UI中使用它。 接下来，可能要考虑多ControlNet的组合使用，比如同时使用线稿和深度图来增强控制。同时，预处理输入的图像质量也很重要，比如清晰的线稿能带来更好的效果。引用[2]中的Scribble涂鸦模型可能在这里有用，允许用户通过简单涂鸦来保持结构一致。 还要注意参数调整，如引导强度、步数等，这些都会影响最终结果。用户可能需要多次实验来找到最佳配置。最后，结合用户提供的示例问题，生成相关问题，帮助用户进一步学习，比如如何安装ControlNet或调整参数。 需要确保回答结构清晰，分点说明方法和原理，并正确引用提到的资料。同时，语言要简洁，避免技术术语过多，让用户容易理解。</think>### Stable Diffusion 使用 ControlNet 提升生成图片一致性的方法与原理 #### 核心原理 ControlNet 通过添加**结构化条件**（如边缘检测、深度图、姿态估计等）引导图像生成过程，使输出与输入条件保持几何或语义上的一致性。其技术核心是将原始扩散模型的权重冻结，并训练一个并行的“条件分支”网络，通过零卷积层逐步融合控制信号[^1][^4]。这种设计既能保留原模型的生成能力，又能通过外部条件（如线稿、涂鸦）约束生成结果的结构。 #### 具体方法 1. **选择控制类型** - 使用 $Canny$ 边缘检测或 $MLSD$ 直线检测（适合建筑、室内场景）[^2]，保留目标物体的轮廓。 - 采用 $Scribble$ 涂鸦模式，通过简笔画定义大致结构[^2]。 - 应用 $Depth$ 深度图控制空间层次，或 $OpenPose$ 控制人物姿态。 2. **参数调整策略** - **控制权重（Control Weight）**：数值范围 $0-2$，值越高对控制条件的服从性越强，但过高可能导致细节僵硬[^3]。 - **终止时机（Ending Control Step）**：设置控制信号在生成过程中的退出步数（如 $0.8$ 表示在前 $80\%$ 步骤生效），后期释放生成自由度以增加细节。 - **引导强度（Guidance Scale）**：与提示词语义配合调整，建议范围 $7-15$。 3. **多条件组合** 可叠加多个 ControlNet 单元（如同时使用线稿+深度图），通过权重分配实现更精准的控制。 ```python # ControlNet 典型调用逻辑（以线稿控制为例） 输入图像 → Canny边缘检测 → 生成条件图 ↓ Stable Diffusion XL + ControlNet权重 → 输出符合线稿结构的图像 ``` #### 应用示例 若需生成**多视角一致的角色形象**： 1. 先通过 $Canny$ 固定角色轮廓 2. 叠加 $Reference$ 模式保持色彩风格统一 3. 设置控制权重为 $1.2$，终止步数为 $0.7$
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值