掌握AI创作神器:10分钟搞定ComfyUI和Flux大模型

大家好我是AIGC阿道夫

最近大火的Flux 1.0模型,大家都去体验过没?

此模型是由SD的前员工创立的黑森林实验室推出,一经推出,业界掀起了非常大的反响,相关从业人员都感叹模型可以媲美甚至赶超SD了;现象级的成为了现在很多AI从业者的首选作图模型;

img

Flux模型的生成效果

我自己测试实验玩了一周多,发现确实很值得入手研究;

对比Midjourney丝毫不逊色:

img

img

img

可以看到,在真实人物和虚拟场景上已经不输MJ了,但是在一些虚拟人物的还原度上,还是有差距,比如游戏领域经典角色《战神》里的奎托斯,显然MJ有更多的训练数据,出来的效果还是会更好一些;(这个也受限于目前Flux的Lora模型比较少,后面应该会越来越多的)

因为Flux官方已经开源了模型,所以只需要简单的几步就可以部署到你自己的电脑上,不用再花冤枉钱去买MJ或者一些收费的画图AI工具了。

那么,接下来我就手把手教大家快速部署ComfyUI和Flux模型到本地;

01

**安装*部署*ComfyUI

下载最新的ComfyUI版本

1)官方地址:

https://github.com/comfyanonymous/ComfyUI**
**

使用GIt clone到本地即可,也可以直接下载Zip压缩包,解压完就可以使用;

2)适用于Win版N卡的一键安装包,下载后解压即可使用;(推荐拥有N卡的同学)

https://github.com/comfyanonymous/ComfyUI/releases/latest/download/ComfyUI_windows_portable_nvidia.7z

记住对应的模型放到\models这个库里面即可;

02

设置中文语言包

同样,通过Git命令,直接将语言包下载到ComfyUI\custom_nodes下即可;

当然,你如果在ComfyUI里面安装了Manager,也可以通过Manager进行安装语言包,安装完成后,在Setting里面完成语言包切换就可以了;

地址:

https://github.com/AIGODLIKE/AIGODLIKE-ComfyUI-Translation

03

下载Flux模型

FLUX 模型有四个可选,大家根据显卡的配置自行选择,我用的fp8的模型,跑出来的效果依然不输给市面上主流的作图工具;

不管你下载的哪个模型,都存放在这个文件夹下:ComfyUI/models/unet/

FLUX.1 [dev] : 官方完整版,需要24G以上的显存

https://huggingface.co/black-forest-labs/FLUX.1-dev/tree/main

FLUX.1 [dev] fp8**:优化后的版本,效果跟dev差不太多;最低12G显存就可以跑**

https://huggingface.co/Kijai/flux-fp8/blob/main/flux1-dev-fp8.safetensors

**FLUX.1 [schnell]:**四步蒸馏模型,大部分的显卡都可以跑

https://huggingface.co/black-forest-labs/FLUX.1-schnell/blob/main/flux1-schnell.safetensors

**FLUX.1 [schnell] fp8:**在schnell的基础上的更优化版本,适合更多显卡配置

https://huggingface.co/Kijai/flux-fp8/blob/main/flux1-schnell-fp8.safetensors

04

下载Clip模型

请下载Clip模型文件到 ComfyUI/models/clip/ 目录:

Clip模型能更好理解Flux模型,所以跟之前用的Clip还是很不一样,建议大家都要下载;

t5xxl_fp16.safetensorst5xxl_fp8_e4m3fn.safetensors

建议选择:如果显存超过 32GB,建议使用 fp16 版本,否则请选择 fp8 版本

https://huggingface.co/comfyanonymous/flux_text_encoders/tree/main

05

下载VAE模型

适用于Flux的编解码专用VAE模型,下载后存放至 ComfyUI/models/vae/ 目录

https://huggingface.co/black-forest-labs/FLUX.1-schnell/blob/main/ae.safetensors

完成

如果你严格按照上面的步骤下载完所有的模型文件,并成功的安装好ComfyUI,那么接下来就可以享受Flux模型带给你的一点点震撼了;

启动ComfyUI,加载一套官方给的工作流便可以开始玩转Flux了;

https://comfyanonymous.github.io/ComfyUI_examples/flux/

(里面的图片保存下来,拖入到ComfyUI中即可转换成工作流)

进阶教程,如何用Flux做出更好附带文字效果的图;

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

请添加图片描述

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
请添加图片描述

### ComfyUI Flux 模型实现介绍 #### 安装与配置 为了在ComfyUI中成功部署并使用Flux模型,需按照特定流程安装必要的组件。首先,访问Hugging Face上的指定资源库以获取所需的各种模型文件[^1]。 对于文本编码器部分,应从提供的链接下载相应文件,并将其放置于`ComfyUI/models/clip/`路径下。T5模型的选择较为灵活,可根据需求选取任意一种版本。VAE模型则可以从另一个指定链接下载,并同样遵循指引存放在对应的`ComfyUI/models/vae/`位置。至于核心的Flux开发版(Dev)模型,则应当被安置在`ComfyUI/models/unet/`目录内[^2]。 #### 工作流操作指南 当所有必需件准备就绪之后,在ComfyUI界面顶部找到未保存的工作流选项卡,从中挑选基础模型类别下的FLUX项。这里特别建议选用名为“FLUX真实感Lora”的预设方案,因其能够提供更贴近自然的效果表现[^3]。 #### 性能优化技巧 考虑到实际应用中的硬件条件差异,可能遭遇内存溢出等问题。对此有专门针对此类情况提出的解决方案:采用单一文件形式存储精度较低(FP8)的数据类型,可以在不影响整体性能的前提下显著减轻系统负担。具体做法是在加载扩散模型时调整参数设置,将权重数据类型的属性设定为FP8模式。这一改动虽然会带来些许画质损失,但却能让更多设备顺利运行该算法[^4]。 ```python # 设置权重数据类型为 FP8 来节省显存空间 load_diffusion_model(weight_dtype="fp8") ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值