仅做笔记用：Stable Diffusion 通过 ControlNet 扩展图片 / 扩图

已于 2023-09-17 12:11:15 修改
阅读量2.4k 收藏 3
点赞数
分类专栏： # AIGC 文章标签： stable diffusion AI绘图 AI作画 python
于 2023-09-12 01:19:17 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35977139/article/details/132820325
版权

发觉之前的 Outpainting 脚本效果仍旧不是很理想。这里又找了一下有没有效果更好的途径来扩图。于是就找到了通过 ControlNet 的方式来实现效果更好的扩图。这里临时记录一下在 Stable Diffusion 怎么使用 ControlNet 来扩展图片。

下载 control_v11p_sd15_inpaint_fp16.safetentors，放到 SD 目录的 \models\ControlNet目录。在这里插入图片描述
在 SD WebUI 里面在 ControlNet 勾选启用。选择局部重绘，然后看一看预处理器是不是 inpaint_only，模型是不是刚才下载的文件，如果不是就改一下。

下边三个滑块不用管。控制模式选择优先 ControlNet，画面缩放模式这里一般选择缩放并填充。在这里插入图片描述
然后在上面的作图尺寸里面根据想要的长宽比输入需要的尺寸（点击图片右下方最右边的按钮，可以直接将导入的图片的尺寸发送到上面的尺寸处）。当然，如果可能的话，请尽量在提示词里面写好背景方面的提示词。然后开始生成。

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

可以将生成的图继续放到ControlNet的图像里面，然后重复步骤4，继续扩展图片！

不同的采样方法效果差别有些大，可以尝试更换不同的采样方法来达到更好的效果。

<!-- !CODE 8d8e30a8-71de-491c-94ad-fbce69abf4a5 -->
wujiuqier
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
Stable Diffusion 使用outpainting扩展图像
Mr数据杨
06-26 2808
通常SD可以应用绘制的图像是固定分辨率的，但是如果想要超出这个分辨率的话那就要使用一些方法，并且如果还想保持这些图片的连贯性，例如背景就要使用到outpainting。
AI绘画Stable Diffusion【手部修复】：SD手部问题修复三种方法大揭秘！
白帽阿叁的博客
06-13 1783
在AI绘画中，手部问题一直是一个麻烦的问题。双手变形、手指缺失、手指多余这些问题常常困惑着我们。本文主要讨论一下关于Stable Diffusion中有哪些方法可以用于修复手部问题。
Stable Diffusion中放大图像的3种方法
2401_84760719的博客
07-02 1312
要执行 ControlNet tile upscale：您想使用 Stable Diffusion 创建包含大量细节的大型图像吗？您将需要使用升频器。在本文中，您将学习 3 种放大图像的方法。人工智能升级器标清高档ControlNet瓷砖高档您将看到比较并了解这些方法的优缺点。如果您不熟悉该主题，则可能需要学习升频器的基础知识。
仅做笔记用：Stable Diffusion 扩展图片 / 扩图
wujiuqier的博客
06-05 4881
现有的解决方案，包括 Bing 搜出来的，基本上都是要收费的，这些解决方案大多基于 DALL-E。那么就应该研究一下开源的 Stable Diffusion 能不能也实现类似的扩图功能。
AI绘图的场景应用：文生图、图生图
qq_41314882的博客
03-15 1447
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
StableDiffusion对图片进行高清、优化、放大
m0_59236602的博客
05-27 2161
StableDiffusion默认生成的图片分辨率为512*512，“只可远观，不可近赏”来形容怕是再合适不过了。好不容易抽到了一张自己心仪的图，但苦于颜色暗淡，分辨率低下，有什么办法能在原画的基础上，让它的细节更丰富吗？答案是肯定且简单的。
灵活运用Stable Diffusion放大你的图像
2401_84250575的博客
05-05 1233
文章使用的AI绘画SD整合包、各种模型插件、提示词、AI人工智能学习资料都已经打包好放在网盘中了，有需要的小伙伴文末扫码自行获取。众所周知，Stable Diffusion对电脑硬件的要求比较高，为了在图像质量和生成速度之间找到平稳点，我们通常采用的方法是：①文生图：勾选高清修复，让软件自动先生成一个尺寸相对小一点图像，再自动对图像进行放大。②图生图：将原图导入，重新设置放大参数或尺寸，生成新的大图。③附加功能：将原图导入，重新设置放大参数或尺寸，生成新的大图。
AI绘画教程：Stable Diffusion如何利用图片反查提示词？
05-29
AI绘画教程 Stable Diffusion 如何利用图片反查提示词？ AI绘画教程 Stable Diffusion 如何利用图片反查提示词？这个问题是最近AI绘画工具Midjourney新出的功能：/describe，可以给出图片然后查到生成图片的prompt...
AI-绘画的工具准备：Stable-Diffusion使用教程.pdf
06-03
AI-绘画的工具准备：Stable-Diffusion使用教程
Stable Diffusion WebUI Forge版ControlNet模型资源包下载
02-23
Stable Diffusion WebUI Forge版ControlNet模型资源包下载
Stable Diffusion 教程、指令、图片（好用 难得）
04-14
Stable Diffusion正是目前超级流行的本地化部署的工程，他可以帮助你画出想要的图片，任何图片，人工智能（AI）绘画是指利用机器学习和深度学习技术来生成艺术作品的一种创造性应用。AI绘画可以在短时间内生成复杂的...
stable-diffusion-webui codeformer.pth
03-11
stable-diffusion-webui Restore faces Error 【https://github.com/AUTOMATIC1111/stable-diffusion-webui/issues/1513】 我认为这与损坏的安装有关。就我而言，我在“\models\Codeformer”上的 Codeformer.pth 已...
Stable Diffusion扩散模型【详解】小白也能看懂！！
qq_23022733的博客
04-04 2508
2、因为每一个像素都有自己的分布，都要预测出一个均值和方差，所以网络输出的尺寸需要和图像尺寸一致，所以我们选用 Unet 网络，假设数据集中有100张图片，每张图片的shape是4x4x3，假设每张图片的每个channel的每个像素点都服从正态分布，图像加噪不是在原有图像上进行加噪的，而是通过把图片的每个像素的值转换为-1到1之间，比如像素的值是。去噪是加噪的逆过程，由时间T时刻的图像逐渐去噪到时刻为0的图像，求导，但是对于扩散的过程是不可行的，如下面的公式无法求出，因为。
Stable Diffusion低显存也能跑大图了，再也不用怕爆显存！
最新发布
WANGJUNAIJIAO的博客
07-05 2372
Stable Diffusion（以下简称SD）是一款很强大的AI绘画软件，很多人都会拿SD和MJ（Midjourney）作对比，其中最重要的一点就是使用门槛上，SD需要最低也是4GB的显存，如果显存低了是没办法获得很好的体验的，最佳的配置是12-24GB 基本上所有的功能都能用。现在pkuliyi2015大佬开发了一个免费插件Tiled Diffusion（插件安装目录文件夹：extensions），可以大幅度减少SD生图所需的显存，其工作原理就是将一张图不同的块，通过连续生成图块，然后再合并成一张图，
探索【Stable-Diffusion WEBUI】的插件：画布扩绘（Outpaint）
Shion's bla bla blog
04-23 6976
相比在里面画，扩大画布并脑补其中内容，感觉挺有意思的。
AI绘画Stable Diffusion：ControlNet插件inpaint_only一键扩图，竖屏变横屏大图教程！
白帽阿叁的博客
05-22 1052
当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。原图的分辨率为1:1，这里改为16:9的分辨率，以确保实现扩图的效果。
ControlNet 1.1重磅发布，14个模型全部开源！
张伟的专栏
05-02 3650
模型效果： ControlNet 1.1 中的新功能：现在我们添加了一种名为“SoftEdge_safe”的新型软边缘。这是因为 HED 或 PIDI 倾向于在软估计中隐藏原始图像的损坏灰度版本，而这种隐藏模式会分散 ControlNet 的注意力，从而导致不良结果。ControlNet 1.1 与 ControlNet 1.0 具有完全相同的体系结构,ControlNet 1.1 包括所有以前的模型，具有改进的稳健性和结果质量,并添加了几个新模型。
Stable Diffusion - 图像控制插件 ControlNet (OpenPose) 配置与使用
Mystra
07-07 6786
ControlNet 是神经网络结构，用于控制预训练的大型扩散模型，以支持额外的输入条件。ControlNet 以端到端的方式学习任务特定的条件，即使训练数据集很小（< 50k），学习也是稳健的。此外，训练一个 ControlNet 和微调一个扩散模型一样快，而且，模型可以在个人设备上训练。或者，如果有强大的计算集群可用，模型可以扩展到大量（百万到十亿）的数据。Stable DIffusion 这样的大型扩散模型可以用 ControlNets 来增强，以实现条件输入，如边缘图、分割图、关键点等。
stable diffusion+webui+chilloutmix/controlnet
09-17
Stable Diffusion WebUI ChilloutMix/ControlNet是一种稳定的网络用户界面，适用于ChilloutMix/ControlNet系统。该系统是一种用于控制和管理网络的解决方案。 Stable Diffusion WebUI ChilloutMix/ControlNet具有以下特点和功能。首先，它提供了直观和用户友好的界面，使用户能够轻松地操作和管理系统。该界面具有清晰的布局和易于理解的图形化界面，使用户可以快速找到所需的信息和功能。 其次，Stable Diffusion WebUI ChilloutMix/ControlNet具有高度稳定和可靠的性能。它能够处理大量的数据和信息，并在工作中保持稳定，从而确保系统的高效运行。 此外，该用户界面还提供了多种功能，包括远程监视和控制系统，实时数据显示和记录，警报和通知管理，以及系统配置和设置等。通过远程监视和控制功能，用户可以在任何地点实时监视和控制系统的状态和运行情况。同时，实时数据显示和记录功能可以提供关于系统运行的实时数据，帮助用户更好地了解系统的性能。 此外，该用户界面还提供警报和通知管理功能，以便及时通知用户系统的异常情况。用户可以配置所需的警报条件，并接收警报和通知消息，以便及时采取措施。 最后，通过Stable Diffusion WebUI ChilloutMix/ControlNet，用户可以对系统进行配置和设置，以满足特定的需求和要求。用户可以根据系统的工作要求进行参数配置，并进行必要的设置和调整，以确保系统的最佳性能。 总的来说，Stable Diffusion WebUI ChilloutMix/ControlNet是一款稳定可靠、功能丰富的网络用户界面，能够有效地管理和控制ChilloutMix/ControlNet系统。它提供了直观和易于使用的界面，具有多种功能，可以满足用户对系统控制和监视的需求。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值