stable diffusion模型介绍及下载、使用方法!

前言

按照上期教程操作,就可以初尝生图乐趣

但是如果无法真实理解这些字母、参数含义,都是照葫芦画瓢。。。麻木的操作而不知缘由,既不能长远也了无生趣。

因此,接下来将陆续分享各模型、参数含义等,分享给各位朋友一起学习。(本节建立在前两节基础上,有需要的朋友可以翻看前文)

一、模型

Stable difusion模型就是所谓的大模型,用来控制整个画面的风格走势的。

打开webui页面,可以看到大模型一般2G以上,大部分后缀为.safetensors或.ckpt,如图:

大模型一般保存文件夹路径如下:

大小为2-7G不等(也就是说如果要增加模型,直接拖到这儿就Ok,下载模型直接看专栏一推荐的网站)

在这里简单介绍下目前主要两类的模型SDXL和SD1.5区别:

SDXL全称 stable diffusion XL;

SD 全称 stable diffuson,一般将 SD 和 SD 1.5 等同

区别:****(一句话总结就是SDXL好,但配置要求高哈哈)****

1、本身出图大小

SD1.5模型参数量小,出图就只能512、768起步,本来像素就不够高。

SDXL是1024起步,长图一般是768*1024这种尺寸,比1.5模型大了一圈,如果再加上高清放大,从清晰度来说肯定是更好的。

2、出图质量

好的人像SDXL模型更高清些,脸部细节更真实,不过显存不足的小伙伴也没啥必要非得整XL。

SD1.5,找到人像效果好的真实模型,也是 ok 的。

3、提示词理解能力

SDXL的一个特点就是,对文本的理解能力更强。

4、人像lora训练方面

以往在 1.5 模型上训练的 lora 更容易过拟合,后面使用SDXL,选我推荐的模型,成功率会高些。

但 SDXL 的 lora,训练更久,尺寸更大,时间消耗也是比较多的。

5、Controlnet 控制方面

如果需要一些Controlnet控制,还是优先1.5型

SDXL的控制类型还不多,暂时不够完善。

这份完整版的SD、comfyui模型整合包已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

在这里插入图片描述

二、VAE

相当于给画面加载滤镜的作用,修正图片色彩,不加载vae画面会比较灰,或者出现很奇怪的乱码感觉。

对应SD1.5模型,常用VAE是:

对应SDXL模型,常用VAE是:

三、lora

一些风格类的小模型,比如人脸、画风、物品等,都可以训练成一个lora模型,通常在几十M到几百M,模型网站上标记着LORA的均为lora模型。

路径如下:

调用方式:找到Lora下面的标签,点击想要的模型,可以同时混合多选。

就会在上方提正向示词当中出现:

冒号后面是权重,一般在0.7、0.8就可以,根据情况去调整。

但是需要注意,lora使用的时候一般是需要触发词的,这个需要在原模型网站上去看(专栏一有推荐下载模型网址),

或使用civitai helper工具去自动获取(civitai helper是一个插件,可以移步

如果获取到,点开lora右上角的小图片应该能看:

去liblib上,触发词会标注得比较清楚。

这份完整版的SD、comfyui模型整合包已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

在这里插入图片描述

### Stable Diffusion 模型下载途径 对于希望获取并使用Stable Diffusion模型的用户来说,存在多种官方与非官方渠道可以用于下载所需的模型文件。一种推荐的方式是从Hugging Face网站上找到由CompVis发布的`stability-ai/stablediffusion`仓库来获得模型权重文件[^1]。 另外,针对不同类型的模型(例如Checkpoint),也有专门的社区资源可供利用。这些资源通常会提供详细的指导说明以及最新的版本链接,方便使用者根据自己的需求挑选合适的预训练模型进行下载[^2]。 当涉及到具体操作层面时,为了确保安全性和合法性,建议优先考虑经过验证的安全源,并遵循各平台给出的操作指南完成下载过程。 ### 使用教程概览 一旦成功下载了所需版本的Stable Diffusion模型之后,下一步就是将其集成到工作环境中去。一般情况下,所下载得到的`.safetensors`或`.ckpt`格式的模型应被放置于指定目录下,即`stable-diffusion-webui/models/Stable-diffusion`路径内[^3]。 在此基础上,通过启动WebUI界面或其他支持该框架的应用程序即可加载已准备好的模型开展创作活动。对于初次接触此类工具的新手而言,网络上有许多详尽的学习资料可以帮助快速掌握基本技能,比如一些专门为初学者设计的教学文档和视频课程能够有效降低入门门槛[^4]。 ```bash # 假设已经克隆了webui项目并且处于该项目根目录 cp /path/to/downloaded/model.safetensors ./models/Stable-diffusion/ ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值