【AI绘画】Flux详细部署教程，附安装包、模型、工作流分享

程序员超超

于 2024-09-25 09:49:52 发布

阅读量764

点赞数 14

文章标签： AI作画 stable diffusion prompt

本文链接：https://blog.csdn.net/2401_85116933/article/details/142515295

版权

在这里插入图片描述

一、介绍

Flux.1：当前地表最强开源AI画图模型

flux.1由Black Forest Labs（黑森林实验室）推出，而Black Forest Labs是Robin Rombach带领研究团队（Stable Diffusion 的核心成员）离开 Stability AI 创立的，所以也可以说是SD的原班人马打造。

由下图可以看出Flux.1模型表现出的效果已经超越了SD3、DALL·E3(HD)和Midjourney v6.0，具有强大的出图能力。
在这里插入图片描述

Flux.1模型在出图细节、文字生成以及人手生成上都具有极强的表现。

在这里插入图片描述

从图上可以看出，Flux.1即使在面对大段文字时也有出色表现，而且还有艺术字的效果。

在这里插入图片描述

在手的生成上也没有出现多手、扭曲等问题，可以说AI终于懂得如何做手了。

感兴趣的也可点击官网详细了解：Black Forest Labs - Frontier AI Lab

接下来就谈谈如何部署吧~

二、部署

要求：

显存 >= 18G
CUDA版本>=11.8

1. 部署ComfyUI

本篇的模型部署是在ComfyUI的基础上进行，如果没有部署过ComfyUI，请按照下面流程先进行部署，如已安装请跳过该步：

（1）使用命令克隆 ComfyUI

git clone https://github.com/comfyanonymous/ComfyUI.git  
cd ComfyUI

（2）安装 conda（如已安装则跳过）

下面需要使用 Anaconda 或 Mimiconda 创建虚拟环境，可以输入 conda --version 进行检查。下面是 Mimiconda 的安装过程：

下载 Miniconda 安装脚本

wget https://repo.anaconda.com/miniconda/Miniconda3\-latest-Linux-x86\_64.sh

运行安装脚本

bash Miniconda3\-latest-Linux-x86\_64.sh

遵循安装提示并初始化

按 Enter 键查看许可证条款，阅读完毕后输入 yes 接受条款，安装完成后，脚本会询问是否初始化 conda 环境，输入 yes 并按 Enter 键。

运行 source ~/.bashrc 命令激活 conda 环境
再次输入 conda --version 命令来验证是否安装成功，如果出现类似 conda 4.10.3这样的输出就成功了。

（3）创建虚拟环境

输入下面的命令：

conda create -n comfyui  
conda activate comfyui

（4）安装 pytorch

pip install torch torchvision torchaudio --extra-index-url https://download.pytorch.org/whl/cu121

（5）安装项目依赖

pip install -r requirements.txt

此时所需环境就已经搭建完成，通过下面命令进行启动：

python main.py

访问网址得到类似下图界面即表示成功启动：

在这里插入图片描述

到这里Comfy UI就初步搭建好了（这里只是简单实现ComfyUI的基础功能，如果想要安装更多细节，请看我“Comfy UI”部署教程）

2. 部署Flux.1

如果你的ComfyUI是在Flux.1模型发布前部署的，那么请先进行更新。

（1）下载Flux.1模型

官方提供了Flux.1系列模型，共有三个：Flux.1[pro]是闭源的，可以从官方 API 申请访问权限，同时支持企业定制。Flux.1[dev]开源，不可商用，直接从 FLUX.1 [pro] 蒸馏而来，具备相似的图像质量和提示词遵循能力，但是更高效。Flux.1[schnell]：开源模型，可商用，专门为本地开发和个人使用量身定制，生成速度最快，内存占用也最小。

进入hugging face网站，点击搜索“flux.1”然后选择dev模型

在这里插入图片描述

然后点击文件模型就可以看到下图的相关文件

在这里插入图片描述

将该模型下载到 /ComfyUI/models/unet/文件夹下，如果这个模型对于你太大就搜索“flux-fp8”下载11.9G的模型。将ae.safetensors下载到 /ComfyUI/models/vae/文件夹下。

（2）下载Clip模型

在hugging face搜索栏搜索”flux_text_encoders“，点击进去

在这里插入图片描述

下载clip_l和t5xxl模型，其中t5xxl模型有两个，根据自己的显卡情况二选一下载（如果你有超过 16GB 的 ram，建议使用 fp32），放置在 ComfyUI/models/clip/文件夹下。

在这里插入图片描述

（3）下载工作流

进入网站：Flux Examples | ComfyUI_examples (comfyanonymous.github.io)并将下图下载，然后拖入Comfy UI中：

在这里插入图片描述

然后你的ComfyUI中应该会出选相应的工作流，类似下图:
在这里插入图片描述

至此Flux.1模型就部署在Comfy UI中了，开启你的探索之旅吧！

写在最后

FLUX相关的模型、工作流以及全套的AI绘画学习资料已经给各位小伙伴打包好了，有需要的可以扫码自取，无偿分享。
在这里插入图片描述

在这里插入图片描述

感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。

在这里插入图片描述

AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。

在这里插入图片描述