Stable Diffusion底模对应的VAE推荐

以下是主流Stable Diffusion底模对应的VAE推荐表格:

底模版本推荐VAE类型说明
SD1.5SD1.5专用VAE通常使用vae-ft-mse-840000-ema-pruned.safetensors
SD2.0SD1.5兼容VAE或SD2专用VAE部分SD2模型需配套512-ema-only.vae.pt
SD3内置VAESD3系列模型通常自带集成VAE无需额外配置
SDXLSDXL专用VAE推荐sdxl_vae.safetensors或官方VAE,Illustrious和Pony一般自带
FLUXFLUX专用VAE可以使用flux-v1-0.vae.pt等配套版本 大部分自带vae

注:SD1.5/SDXL的VAE可交叉兼容部分场景,但FLUX需严格匹配对应版本

引用链接:
1.从小白角度解析 SDXL,SD1.5、SD2.0、SD3、SD3.5、Flux、VAR、Infinity【干货篇-最新扩散模型、自回归生成模型解析及代码公开网址大全】 - CSDN博客
2.AI绘画实操(三)stable diffusion模型介绍及下载、使用方法_sdai绘画模型 下载_stablediffusion 年画 模型 下载-CSDN博客 - CSDN博客
3.超全Stable Diffusion 常用模型推荐(含网盘下载链接) - 赵飞
4.【Stablediffusion】爆火的SD34.8 FLUX 如何区分SD1.5和SDXL? - 腾讯云
5.SD图片生成模型系列总结 - Breakthroughs
6.Stable Diffusion XL1.0正式发布了,赶紧来尝鲜吧 - 腾讯云
7.只要三分钟,让你快速掌握 SD-Lora 模型炼制的基础知识 - 优设网
8.用StabilityMatrix一键安装Stable Diffusion - 搜狐
9.Stable Diffusion(SD)系列模型及关联算法深度解析 - CSDN博客
10.Stable Diffusion WebUI Forge 支持 Flux 了! - 萤火架构
11.Stable Diffusion 硬核生存指南:WebUI 中的 VAE - 腾讯云
12.【stablediffusion教程】AI绘画,2024年下半年爆火的FLUX模型是什么,5分钟让你对Flux完全了解 - CSDN博客
13.stable diffusion 大模型 - HuggingAI
14.StableDiffusion的新模型SDXL1.0 - 晋然知道
15.AI绘画专栏之statble diffusion SDXL 1.0 (五) - 腾讯云
16.Stable Diffusion ComfyUI 基础教程(七)如何使用三大微调模型:Embeddings、Lora、Hypernetwork - 优设网

### Stable Diffusion LDM模型介绍 潜变量扩散模型(Latent Diffusion Model, LDM),特别是Stable Diffusion,代表了一类先进的生成对抗网络技术,在图像合成领域取得了显著成就[^1]。这类模型通过引入潜在空间的概念来优化传统扩散模型中存在的计算资源浪费问题。具体而言,LDM能够在较低维度的空间内执行去噪过程,从而大幅减少所需的内存占用并提高效率。 #### 架构组成 Stable Diffusion的核心组成部分主要包括三个模块: - **CLIP**:负责理解输入提示词的意义,并将其转换为适合指导图像生成的形式。 - **U-Net**:作为主要的工作马达,该部分实现了基于潜在表示的学习逆向扩散流程;其结构允许逐层细化特征直至最终形成清晰图片。 - **VAE(变分自编码器)**:用于实现从像素级到潜在表征之间的映射关系建立以及反向解码操作。 这些组件共同协作完成由文本描述至对应视觉表达的转变任务[^2]。 ### 使用方法概述 对于希望利用预训练权重快速体验Text-to-Image(T2I)能力的研究者来说,可以通过如下命令行指令轻松获取官方提供的大型T2I模型参数文件[^3]: ```bash mkdir -p models/ldm/text2img-large/ wget -O models/ldm/text2img-large/model.ckpt https://ommer-lab.com/files/latent-diffusion/nitro/txt2img-f8-large/model.ckpt ``` 上述脚本首先创建了一个必要的目录结构用来存储下载的数据集或模型权重,接着运用`wget`工具指定URL地址直接拉取目标`.ckpt`格式的checkpoint文档保存于本地路径下。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值