如何使用stable diffusion生成透明图?一个操作就能实现(附插件)

像这样的单图背景该怎么使用AI生成呢?

或者这样

的图该怎么生成了,今天一个教程教会大家如何快速使用最新版stable-diffusion来生成这样的单图效果。

准备工作:

1、确保你的设备拥有一张显存在8GB以上的英伟达显卡;

2、windwos系统;

3、显卡已经安装了相应的cuda,

安装过程:

安装最新版本的stable diffuion,其下载地址为:

https://github.com/lllyasviel/stable-diffusion-webui-forge

打开上述网页后,下载官网推荐的第一个一键整合包,下载完毕后将其解压到本地,随后进入项目文件找到并双击“update.bat”来完成项目更新(这一步很重要,否则后期你生成的图片将不会有透明图),

在完成软件更新后,接下来双击运行文件‘run.bat’以启动安装程序。如果这是您第一次运行该程序,它会根据您的电脑硬件配置自动联网下载并安装所需的依赖包。在此过程中,请确保设备可以顺利连接到互联网。如遇网络连接问题,请参阅文末的解决方案

“如下图所示,成功安装所有依赖后,软件会自动打开一个WebUI界面,这就是最新版本的Stable Diffusion。该版本是在原1.10.1版的基础上升级而来,不仅支持经典的SD1.5界面,还兼容XL以及最近十分火爆的Flux等多种类型的UI界面。

下一次你需要启动此项目时,同样还需要双击运行"run.bat"软件程序。

插件安装:

1、stable-diffusion界面的汉化

在成功启动项目后,如果你是第一次运行该项目那么打开的sd的webui界面将会是英文,很不方便阅读,为此我们还需要安装一款能够将英文版的webui界面汉化为中文的webui界面,这款插件的项目地址为:

https://github.com/VinsonLaro/stable-diffusion-webui-chinese

如果你具体还不知道webui界面怎么汉化,那么可以参照下图所示的演示:

步骤1

步骤2

2、安装LayerDiffuse

插件地址:

https://github.com/lllyasviel/sd-forge-layerdiffuse
  打开插件项目的网页,将插件项目下载到本地电脑。下载完成后,解压该项目并将其拖入Stable Diffusion项目根目录下的`extensions`文件夹中。如果您的SD项目正在运行,请先关闭它。然后,双击运行‘run.bat’程序。项目启动后,将自动为插件安装所需的依赖。在此过程中,请确保网络连接顺畅。如下图所示:  

                                layerdiffuse安装全程

如何使用LayerDiffuse

1、下载xl大模型

在使用LayerDiffuse生成单图之前,请确保您的设备已下载了SD1.5和XL的大模型。通常情况下,在您第一次安装上述提到的最新版SD WebUI时,软件会自动下载一个名为“RealisticVisionV51_v51VAE”的SD1.5模型。为了更好地体验其他版本的SD单图生成功能,建议您另外下载一个XL模型。官方推荐的两款XL模型下载地址如下:

https://civitai.com/models/133005?modelVersionId=198530
https://civitai.com/models/261336?modelVersionId=295158

具体可以参考下面的下载方式:

在把模型下载到本地后,将其拖动到sd根目录下“models\Stable-diffusion”目录内,

2、使用layerdiffuse生成单图:

首先我们准备了下面的提示词:

an apple, high quality``   ``Negative prompt: bad, ugly``   ``Steps: 20, Sampler: DPM++ 2M SDE Karras, CFG scale: 5, Seed: 12345, Size: 1024x1024, Model hash: 1fe6c7ec54, Model: juggernautXL_version6Rundiffusion, layerdiffusion_enabled: True, layerdiffusion_method: Only Generate Transparent Image (Attention Injection), layerdiffusion_weight: 1, layerdiffusion_ending_step: 1, layerdiffusion_fg_image: False, layerdiffusion_bg_image: False, layerdiffusion_blend_image: False, layerdiffusion_resize_mode: Crop and Resize, Version: f0.0.17v1.8.0rc-latest-269-gef35383b

将其全部复制下来,粘贴到sd的正向提示词输入区,在正向提示词输入框的右侧找到一个白色小箭头,单击它,这样就将上述提示词分发到相应的参数设置区内。

接下来,在webui界面内找到“LayerDiffuse”这一功能区,启用它,然后在模式选择区选择“(SD1.5) Only Generate Transparent Image (Attention Injection)”,当然,如果你使用的模型为xl的,那么你自然就需要选择“(SDXL) Only Generate Transparent Image (Attention Injection)”,最后点击“生成”

这就是layerdiffuse单图生成功能的用法。

3、layerdiffuse根据前景图生成背景图

在此之前,请准备一张透明背景的png图片,在layerdiffuse的功能区,选择模式“(SD1.5) From Foreground to Background (need batch size 2)”随后将准备好的透明背景png图片拖动到layerdiffuse的foreground功能区。【说明: 这里我演示使用的模型为1.5版本】

接下来,还需要在“(SD1.5) From Foreground to Background (need batch size 2)”功能区,为你即将生成的背景输入必要的提示词,以及对整个画面描述的提示词。

因为软件是将现有的png图片,以及马上将要生成的图片融合在一起,所以我们需要在每次数量这里,将参数调整为2,不然将会导致图片融合失败。最后点击“生成”,如下图所示:

当然了,使用layerdiffuse生成单图还有其他许多不同的玩法,感兴趣的朋友们可以到下面的的网站内观看:

https://github.com/lllyasviel/sd-forge-layerdiffuse

‍如果你对本期内容感兴趣,并且想要深入学习更多关于AI绘画方面的知识,那么可以参考下面的AI绘画教程。

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉12000+AI关键词大合集👈

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
AI漫画助手5.0.1通过集成Stable Diffusion插件,为漫画创作提供了强大的支持。Stable Diffusion是一种基于深度学习的图像生成模型,它能够根据用户输入的文本描述生成相应的漫画图像。为了解决如何在AI漫画助手5.0.1中使用这一插件的问题,建议参考以下步骤: 参考资源链接:[AI漫画助手5.0.1更新:Stable Diffusion插件集成使用指南](https://wenku.csdn.net/doc/3f1cjki93t?spm=1055.2569.3001.10343) 首先,确保你已经安装了AI漫画助手5.0.1的最新版本。如果尚未安装,请根据'安装前必看.txt'文件中的安装指南进行安装。文件会指导你完成软件的安装、系统要求检查以及初始化配置。 安装完成后,打开AI漫画助手软件,你可以找到一个专门的Stable Diffusion插件模块或界面。在这里,你可以输入文本描述,比如人物特征、场景设置、故事情节等。输入描述后,点击生成按钮,软件将利用Stable Diffusion模型开始处理,生成相应的图像。 在这个过程中,Stable Diffusion模型会将文本描述转化为图像生成过程中的条件,进而生成与描述相符的漫画图像。这个过程是基于大量预训练数据的学习结果,因此生成的图像质量往往较高,且能较好地符合用户的创作意图。 此外,软件可能还提供了图像编辑和风格转换的功能,使得用户可以根据自己的需求进一步调整生成的图像,实现更加个性化和专业的漫画创作效果。 在你熟悉了软件的基本操作后,可以尝试更多的高级功能,如风格迁移、图像上色、图像修复等,这些都能够通过Stable Diffusion插件获得支持。随着使用的深入,你可以更好地掌握AI漫画助手5.0.1的全部功能,从而提高漫画创作的效率和质量。 对于那些希望通过编程来实现更深层次定制的用户,Python脚本文件'jubenchajian5_01.py'提供了修改和扩展软件功能的可能性。用户可以根据自己的需求,对脚本进行相应的编程和调试,以达到定制化的创作目的。 当完成漫画作品的创作后,不要忘记查看软件内的导出功能,将你的作品导出为常用的图像格式,以便进行打印、分享或是进一步的编辑。 希望以上信息能帮助你顺利地在AI漫画助手5.0.1中使用Stable Diffusion插件进行创作。如果你希望进一步探索AI漫画助手的更多高级功能和技巧,推荐阅读《AI漫画助手5.0.1更新:Stable Diffusion插件集成使用指南》,这份资源将为你提供更全面的技术支持和指导。 参考资源链接:[AI漫画助手5.0.1更新:Stable Diffusion插件集成使用指南](https://wenku.csdn.net/doc/3f1cjki93t?spm=1055.2569.3001.10343)
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值