本地部署 Flux.1文生图大模型

Hello 0 1

已于 2024-09-23 16:13:42 修改

阅读量2.8k

点赞数 22

文章标签：本地部署 Flux.1 文生图大模型 StableDiffusion

于 2024-09-23 13:53:09 首次发布

本文链接：https://blog.csdn.net/chinagaobo/article/details/142456298

版权

AI图像生成技术近年来飞速发展,掀起了一股创意革命。作为其中的佼佼者,Flux.1模型凭借其强大的文生图能力,引起了广泛关注。作为一名热爱创新的开发者,我决定尝试在本地部署Flux.1模型,探索其无限可能。以下就是我的部署历程,希望能为有同样想法的你提供一些参考和启发。

我已将要下载的模型、应用程序、语言包分享给各位，自己百度网盘下载，有点大哟！网盘分享的文件：
链接：https://pan.baidu.com/s/1b2OauVItR9T51YSDSuvp0Q?pwd=yo74
请将下载的模型放到应用程序相应的目录，不要搞错了！！！

\ComfyUI_windows_portable\ComfyUI\models目录下

+---clip
|       clip_l.safetensors
|       put_clip_or_text_encoder_models_here
|       t5xxl_fp8_e4m3fn.safetensors
|       
+---unet
|       flux1-schnell.safetensors
|       put_unet_files_here
|       
+---vae
|       ae.safetensors
|       put_vae_here

引言

FLUX.1是由原Stable Diffusion团队成员新成立的Black Forest Labs推出的一款拥有12B参数的开源AI绘画图片生成大模型，是目前最大的开源文本到图像模型之一。它不仅仅是一个技术奇迹，更是一种创新的艺术工具，能够将文字描述转化为令人惊叹的视觉图像。FLUX.1包含三种不同的变体：专业版（FLUX.1 [pro]）、开发版（FLUX.1 [dev]）和快速版（FLUX.1 [schnell]），以满足不同用户的需求。无论是商业应用还是个人创作，FLUX.1都能提供相应的解决方案。

Flux模型概述
- Flux Pro: 顶级模型，仅通过API调用
- Flux Dev: 开源但非商用，质量接近Pro
- Flux Schnell: 蒸馏版，速度快10倍，适合低配置显卡
  
  以下为各种模型的对比
部署步骤
- 步骤1: 下载最新版ComfyUI
  - 官方下载https://github.com/comfyanonymous/ComfyUI
- 步骤2: 设置中文语言
  - 下载中文语言包https://github.com/AIGODLIKE/AIGODLIKE-ComfyUI-Translation并解压至ComfyUI\custom_nodes目录
- 步骤3: 下载Flux模型
  
  因为显卡限制选择了FLUX.1 schnell版。
- 步骤4: 下载CLIP模型
  - 下载t5xxl_fp8_e4m3fn.safetensors，建议选择fp8版本
  - 将clip_l.safetensors放入ComfyUI/models/clip/目录
- 步骤5: 下载VAE模型
  - 将VAE模型放入ComfyUI/models/vae/目录
4.运行

在ComfyUI_windows_portable目录下：有N卡请可以运行run_nvidia_gpu.bat,如果只用cpu请运行’run_cpu.bat’

5.示例获取

在这个示例https://comfyanonymous.github.io/ComfyUI_examples/flux/中有模型参数。因为我选择的是schnell版，所以选择了以下图片。在运行界面将这以下图片拖放到浏览器界面。
在这里插入图片描述
运行界面

5.提示词示例

Beautiful Asian woman holding flowers, sitting in front of the window, Korean model, real photo style, full body shot.
将上面的提示词粘贴在文本编码器中，点击”添加提示词队列“后，静静地等待…,生成图时间长短取决你的硬件，硬不硬！跑出来的图片有时可能缺胳膊少腿，有点反人类哦！

在这里插入图片描述

通过本地部署Flux.1模型,我亲身感受到了这款AI绘画巨头的强大实力。它能够根据文字描述生成惟妙惟肖的图像,让创意无限放大。作为一名热爱创新的开发者,我相信Flux.1必将在AI图像生成领域掀起新的浪潮,为创意工作者带来全新的可能。Flux.1的快速版FLUX.1 [schnell]针对个人用户,提供了一个简单易用的AI绘画工具,让每个人都能发挥创意,实现自己的视觉构想。,为艺术创作、媒体和娱乐、广告营销、教育研究、个人创意带来无限的可能。