Stable Diffusion | 图片的创成式填充，ControlNet插件的强大功能解析

所谓图片的创成式填充，就是基于原有图片进行扩展或延展，在保证图片合理性的同时实现与原图片的高度契合。是目前图像处理中常见应用之一。这项技术已成为当前图像处理领域的热门应用。过往，此类操作多依赖于Photoshop等专业软件完成。现在，让我们一同探索在Stable Diffusion模型下，如何高效实现这一创意过程。

#01

/效果

原图片：512*512

横向扩展：1024*512

纵向扩展：512*1024

#02

/操作方法

【第一步】：图生图图片的上传

在图生图功能界面，上传一张图片，我这里上传一张500*500大小的图片。

图生图中比较重要的参数，一个是“缩放模式 ”，选择“缩放后填充空白”；然后是尺寸，如果是横向扩充就增加宽度，如果是纵向扩充就增加高度；单批数量可以根据需求填写，增加抽卡概率；最后尽量将“重绘幅度”加大到“0.8”以上，让AI充分发挥想象。

• 缩放模式：选择“缩放后填充空白”。
• 蒙版区域内容处理：原图，只针对原图片的基础上进行一个小的改动
• 重绘区域：整张图片
• 采样器：DPM++ 2M SDE Karras
• 采样迭代步数：30
• 图片宽高：768512。原图片是512512。这里我们保持图片的高度500不变，将图片宽度512横向扩展为768。
• 生成数量：6一次多生成几张，提高抽签概率
• 重绘强度：设置为1

【第二步】ControlNet的设置

启用插件，“控制类型”选择“局部重绘”，也就是我们之前讲到过的inpaint预处理器，然后在预处理器的下拉菜单中选择“inpaint_only+lama”这是专门用于扩图。另外，控制模式选择“更倾向Controlnet”，缩放模式选择“缩放后填充空白”。

相关参数设置如下：

• 控制类型：选择"局部重绘"
• 预处理器：inpaint_only+lama（局部重绘+大型模版，主要用于图片扩展）
• 模型：control_xxx_inpaint
• 控制权重 : 设置为1
• 控制模式：选择“更偏向ControlNet”
• 缩放模式：选择"缩放后填充空白"

【第三步】提示词的编写

可以反推原图片提示词，加入到正向提示词里以保证图片扩展时AI能结合提示词更好发挥，做到最合理保持与原图片的契合度。

【第四步】大模型的选择以及图片的生成

大模型选择和自己图片画风一致的即可，按下【生成】按键，请知悉，由于内容生成的多样性，每次尝试可能不都能完全符合您的预期，因此建议您多次使用此功能，以便从众多结果中挑选出最满意的选项。

#03

/去除人像

将画面中不需要的元素去掉，也是“创成式生成”中非常有用的一个功能，这个功能的实现不需要用到controlnet，直接使用“图生图”中的局部重绘就可以了。

我们以这张图片为例子，看看怎么快速去掉图中的人物。

在使用“局部重绘”时，有一个步骤很关键，就是选择我们的大模型。

我们打开C站，可以看到下载页面有一个版本选择的地方，有的版本号的后面跟了一个inpainting，说明这个模型是专门用于重绘的，所以要下载和使用这个模型。

不用填写任何提示词，只需要将图片放入“局部重绘”中，涂抹掉人物的部分，蒙版可以比人物更大一点，保证能全部包裹住。

蒙版区域内容处理选择“填充”，“重绘幅度”为1。

这样，我们就很快地将人物去掉了。

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

对于0基础小白入门：

如果你是零基础小白，想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短，学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括：stable diffusion安装包、stable diffusion0基础入门全套PDF，视频学习教程。带你从零基础系统性的学好AI绘画！

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

1.stable diffusion安装包 （全套教程文末领取哈）

随着技术的迭代，目前 Stable Diffusion 已经能够生成非常艺术化的图片了，完全有赶超人类的架势，已经有不少工作被这类服务替代，比如制作一个 logo 图片，画一张虚拟老婆照片，画质堪比相机。

最新 Stable Diffusion 除了有win多个版本，就算说底端的显卡也能玩了哦！此外还带来了Mac版本，仅支持macOS 12.3或更高版本。

2.stable diffusion视频合集

我们在学习的时候，往往书籍代码难以理解，阅读困难，这时候视频教程教程是就很适合了，生动形象加上案例实战，一步步带你入门stable diffusion，科学有趣才能更方便的学习下去。

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果，这时则需要通过使用大量训练数据，调整模型的超参数（如学习率、训练轮数、模型大小等），可以使得模型更好地适应数据集，并生成更加真实、准确、高质量的图像。

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言，整个SD学习过程中都离不开这本提示词手册。

5.AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

这份完整版的学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】