最强AI绘画大模型Flux可以在SDWebUI 上使用了！超便捷的Flux模型使用教程！AI绘画零基础入门到实战教程

画画的小强

于 2024-10-07 11:56:13 发布

阅读量1k

点赞数 15

文章标签： AI作画 AI绘画 SD教程 StableDiffusion Flux SD WebUI AI绘画大模型

本文链接：https://blog.csdn.net/A1353192296/article/details/142737933

版权

大家好，我是画画的小强

目前最强的AI绘画大模型Flux.1 横空出世有段时间了，模型效果也得到了广泛的认可，但是 Stable Diffusion WebUI 官方迟迟没有跟进，据说是因为要修改很多底层的处理机制，加之ComfyUI如火如荼，可能AUTOMATIC1111大佬的心气也不是很高，选择了躺平，又或者是在秘密的憋大招。

不过在开源的AI绘画界还有另一个大佬，那就是 ControlNet 的作者张吕敏，他搞了一个SD WebUI的衍生版：Stable Diffusion WebUI Forge。Flux发布没多久，Forge就开始了相关的支持工作，虽然目前还有很多特性没有得到支持（这也间接说明WebUI支持Flux的改造难度确实很大），比如ControlNet，但是基本的文生图和图生图已经没有什么问题了，喜欢WebUI的同学可以体验下了。

本地部署

Stable Diffusion WebUI Forge 提供了一个一键安装包：安装包下载请扫描免费获取哦
在这里插入图片描述

下载后需要解压，然后进入解压出的文件夹，双击执行 update.bat，将程序升级到最新版本，最后双击执行 run.bat ，启动程序。

其它模型还需要自己手动下载，放到相应的目录中。

使用方法

我这里截了一张在Forge中使用Flux生图的操作过程，大家可以有个基本的认识。

下面分步介绍下：

1、UI

选择Flux。选择不同的UI，下边的一些选项会有所变化，比如宽度和高度、提示词引导系数的默认值等等。

2、模型和VAE/Text Encoder

这里演示用的Flux基础模型自带VAE（潜空间编解码器）和Text Encoder（文本提示词编码器），所以不需要选择VAE/Text Encoder；如果你使用的Flux模型是单独的unet模型，则需要选择VAE和Text Encoder。

Forge支持的Flux基础模型一般有这几种：

flux1-dev-bnb-nf4-v2.safetensors 张吕敏大佬搞的unet量化模型。
flux1-dev-fp8_unet.safetensors 只包含unet模型。
flux1-dev-fp8.safetensors 包含unet、vae和text encoder模型。

这几个模型需要放到 Forge 模型目录的基础模型子目录下。

Forge需要的VAE和Text Encoder模型包括：

ae.safetensors Flux使用的VAE模型；
clip_l.safetensors 相对传统的文本提示词编码器模型；
t5xxl_fp16.safetensors 比较新的文本提示词编码器模型，使用自然语言。

这几个模型需要放到 Forge 模型目录的 vae 子目录下。

这里给出一些模型的搭配组合：

flux1-dev-fp8.safetensors
flux1-dev-fp8_unet.safetensors + ae.safetensors + clip_l.safetensors + t5xxl_fp16.safetensors
flux1-dev-bnb-nf4-v2.safetensors + ae.safetensors + clip_l.safetensors + t5xxl_fp16.safetensors（可选）