ComfyUI工作流来了,6G显存可用的FLUX量化模型

图片

前一段时间,SD原班人马离职后,开发出来FLUX,然后将其中两个大模型开源。

和SD3相比,FLUX对提示词的理解更到位,画质更精美,尤其是画手方面,和MJ不相上下。

在提示词相同的情况下,FLUX完全可以和MJ一较高低。

不过,FLUX对硬件配置的要求比较高,量化版本要12G显存(实测8G也可)起步。

且速度比较慢,这给很多小显存用户带来了困扰。

并且直至现在,WebUI还没有对FLUX的支持,只能在较为专业的ComfyUI上玩。

传说中的赛博佛祖张吕敏再次出手,开发了更加精简的FLUX量化版本,在其改造的Forge工具上,只需要6G显存就能跑得起来!

仅仅过了一天,ComfyUI工作流就放出来了!

又过了一天,张吕敏优化的V2.0模型放出,

V2 经过更好的方式量化,以关闭双重量化的第二阶段。
V2 比之前的版本大 0.5 GB,因为块 64 范数现在存储在全精度 float32 中,这使其比之前的版本更加精确。此外,由于V2 没有第二个压缩阶段,因此现在实时解压的计算开销更少,从而使推理速度更快一些,
V2 的唯一缺点是体积大了 0.5 GB。

你看我差那0.5G空间吗?!

V2模型网盘下载:

https://pan.quark.cn/s/21b17f85b603

该模型支持张吕敏的Forge,也支持ComfyUI,ComfyUI需要安装新节点。

节点地址:

https://github.com/comfyanonymous/ComfyUI_bitsandbytes_NF4

工作流网盘下载:

https://pan.quark.cn/s/d3cc9ac030c9

在Forge的安装和使用与v1版本完全一样,不再赘述。今天降一下如何在ComfyUI下使用。

一、工作流简介

图片

和标准工作流相比,只是改动了模型加载节点。但采样器节点和以前的用法有区别,下面我挨个介绍。

1、模型加载节点:

图片

和传统模型加载节点没有区别,将模型安装至ComfyUI\models\checkpoints

2、采样器:

图片

CFG必须选择1,否则无法正常出图;采样器必须选择euler。

步数可以20-30之间。

二、错误提示解决

我在第一次使用的时候,遇到报错:

‘ForgeParams4bit’ object has no attribute ‘module’

如图类似提示:

图片

解决方式是重装bitsandbytes组件,如果使用的秋叶启动器,可以在启动器的环境维护中重新安装。

图片

三、跑图

1、纹身女孩

提示词:

i want the whole image to be created in 3D anime style, 1girl, solo, long hair, looking at viewer, black hair, brown eyes, jewelry, closed mouth, upper body, braid, earrings, looking back, from behind, blurry, black eyes, lips, single braid, tattoo, blurry background, piercing, forehead, freckles, realistic, nose, back tattoo

图片

2、刀

提示词:

i want the whole image to be created in 3D anime style, solo, short hair, simple background, shirt, black hair, gloves, long sleeves, 1boy, holding, jewelry, standing, jacket, white shirt, weapon, male focus, earrings, black gloves, collared shirt, pants, sword, holding weapon, coat, black jacket, tattoo, feet out of frame, facial hair, holding sword, looking down, formal, suit, black background, sheath, black coat, grey pants, undercut, unsheathing

图片

3、小黄人

提示词:

a minion , masterpiece,(holding up a sign with the word “GalaxyRover”:1.8), epic background, positive emotional,

图片

Flux对英文处理的非常好,完全没有拼凑图层的感觉。

4、女战士

提示词:

great lighting, intricate detail, beautiful, stunning Japanese space marine, long blonde hair with colored streaks, bangs, skin-tight teal body armor with dark blue accents, holding assault rifle, aiming at viewer, standing next to armored vehicle on a rocky, dusty planet surface, High Detail, Perfect Composition, movie scenes, highly detailed. Photorealistic rendering, dramatic lighting, sharp contrast

图片

5、JK女战士

提示词:

great lighting, intricate detail, beautiful, stunning Japanese cyberpunk woman, 20 years old, two-tone medium length hair, blue with red streaks, bangs, wearing a short sailor blouse cropped above the navel, pierced navel, pleated miniskirt, thigh-high socks, holding assault rifle with both hands, aiming at viewer, on a cyberpunk street at night with noeon signs and digital advertising screens, High Detail, Perfect Composition, movie scenes, highly detailed. Photorealistic rendering, dramatic lighting, sharp contrast

在这里插入图片描述

6、阳光里的笑靥

提示词:

hyperrealistic digital painting by Jeremiah Ketner and Charlie Bowater and Stanley Artgerm and Thomas Saliot and J. Scott Campbell, shallow depth of field, bokeh, incredibly detailed, real, smirk, side view, photoshoot

图片

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

<think>好的,我现在需要帮助用户解决在ComfyUI中下载模型的问题。用户提到想了解如何在工作流中下载模型,或者找到相关的教程和方法。首先,我应该回忆一下之前提供的引用内容,特别是引用[1]和引用[2],因为它们提到了模型存放的位置和SDXL双模型的结构。 首先,用户可能不太清楚ComfyUI模型管理方式和下载步骤。根据引用[1],模型需要放在ComfyUI\models\checkpoints目录下,并且可以与WebUI共享模型。所以,用户可能需要知道如何正确放置下载的模型文件。但用户的问题是关于下载模型的教程或方法,所以需要指导他们如何获取模型文件,而不仅仅是放置位置。 接下来,引用[2]详细介绍了SDXL模型的构成,括base和refiner模型,以及它们的用途。这可能意味着用户对SDXL模型特别感兴趣,所以需要提供下载这些模型的具体步骤。同时,用户可能需要了解从哪里下载这些模型,比如官方网站或社区推荐的平台。 用户可能遇到的问题括:不知道去哪里下载模型、下载后如何正确安装到ComfyUI中,以及如何在工作流中配置双模型。因此,回答需要分步骤说明下载流程,推荐可靠的资源网站,并指导如何放置模型文件。此外,可能还需要提及如何在工作流中添加模型节点,特别是使用双模型时的注意事项。 还需要考虑用户的操作系统,但一般来说,路径结构在Windows和Linux下类似,只是斜杠方向不同。另外,要提醒用户注意模型文件的格式,通常是.safetensors或.ckpt,确保下载正确的文件类型。 另外,用户可能对模型共享感兴趣,即如何在ComfyUI和WebUI之间共享已有的模型,避免重复下载。这需要说明如何通过符号链接或直接复制文件到指定目录来实现。 最后,需要生成相关问题,可能涉及模型管理、工作流配置、常见问题解决等,以帮助用户进一步学习。</think>在ComfyUI中下载和使用模型需要遵循特定的目录结构和工作流配置方法。以下是分步操作指南: ### 一、模型下载与安装步骤 1. **获取模型文件** - 访问官方模型库(如HuggingFace、CivitAI)或社区推荐平台 - 推荐SDXL模型下载地址: ```text https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0 https://huggingface.co/stabilityai/stable-diffusion-xl-refiner-1.0 ``` - 下载后得到`.safetensors`格式文件,这是当前推荐的安全模型格式 2. **目录结构配置** ```bash ComfyUI ├── models │ ├── checkpoints # 主模型存放位置[^1] │ ├── vae # 变分自编码器 │ ├── lora # LoRA模型 │ └── upscale_models # 超分辨率模型 ``` 将下载的SDXL base模型和refiner模型都放入`checkpoints`目录 3. **模型共享配置(可选)** - 若已安装WebUI,可通过符号链接共享模型: ```bash mklink /J "ComfyUI\models\checkpoints" "WebUI\models\Stable-diffusion" ``` ### 二、工作流配置示例 ![SDXL双模型工作流示意图] 1. 基础模型节点配置 ```python Load Checkpoint -> CLIP Text Encode -> KSampler -> VAE Decode ``` 在节点参数中选择`sd_xl_base_1.0.safetensors` 2. 细化模型衔接配置 ```python KSampler输出 -> Refiner Load Checkpoint -> CLIP Text Encode -> KSampler ``` 细化模型使用`sd_xl_refiner_1.0.safetensors`,噪声水平建议设置为0.3-0.5[^2] ### 三、注意事项 1. 模型文件大小: - Base模型约6.9GB - Refiner模型约6.6GB 2. VRAM需求: - 使用双模型需要至少8GB显存 3. 文件验证: ```bash # 检查模型哈希值 certutil -hashfile your_model.safetensors SHA256 ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值