从0到1本地ComfyUI 上使用 SD 3.5 Medium 入门基础教程，小显存也能秒速8步出图

前字节AI绘画师

已于 2024-12-29 19:17:45 修改

阅读量2.3k

点赞数 20

分类专栏： AIGC 文章标签：人工智能 stable diffusion comfyui Flux Flux模型

于 2024-11-14 11:35:21 首次发布

本文链接：https://blog.csdn.net/m0_71745754/article/details/143764070

版权

AIGC 专栏收录该内容

276 篇文章

订阅专栏

软件
SD 3.5 型号
生成时间
图像大小
内存要求
执照
Google Colab 上的 SD 3.5 Medium
本地设置中的 SD 3.5 Medium
步骤 0：更新 ComfyUI
步骤 1：下载 SD 3.5 Medium 模型
步骤 2：加载 ComfyUI 工作流
稳定扩散 3.5 中等设置
采样方法
CFG 规模
图片大小

软件

ComfyUI是 AUTOMATIC1111 的替代品。您可以在Windows、Mac或Google Colab上使用它。

Stable Diffusion 3.5 目前不受AUTOMATIC1111和Forge支持。

SD 3.5 型号

生成时间

ComfyUI 上有以下 SD 3.5 模型。下面的时间是我从 RTX4090 获得的时间。

模型

每张 1,024×1,024 图像的时间

|
|
|
| — | — |
|
SD 3.5 Medium

4 秒

|
|

SD 3.5 Large

20 秒

|
|

SD 3.5 Large Turbo

10 秒

图像生成时间。

因此，中型模型是迄今为止最快的 SD 3.5 模型。

图像大小

该模型的标准分辨率为 1024×1024。与SDXL和Flux一样，您可以使用大约等于 1M 像素的其他长宽比。

1:1 – 1024 x 1024
5：4 – 1152 x 896
3：2 – 1216 x 832
16：9 – 1344 x 768

该型号还支持从 256×256 到 1,440×1,440 像素的分辨率。下面我将展示一些比较图像。

内存要求

您应该能够运行具有 8 GB VRAM 的 SD 3.5 Medium。

执照

SD 3.5 Large 拥有更宽松的社区许可证，允许小型企业将其用于商业用途。

Google Colab 上的 SD 3.5 Medium

如果您使用我的ComfyUI Colab 笔记本，请选择SD_3_5_Medium模型并启动笔记本。

本地设置中的 SD 3.5 Medium

按照以下步骤在 Windows、Mac 或 Linux 系统上的 ComfyUI 上安装 SD 3.5 Medium。

您可以使用默认工作流程，也可以下载下面的工作流程。

步骤 0：更新 ComfyUI

ComfyUI 于 2024 年 10 月开始原生支持 SD3.5。如果您从那时起还没有更新过 ComfyUI，请立即更新。

更新 ComfyUI 最简单的方法是通过ComfyUI 管理器。单击管理器>更新 ComfyUI。

重新启动ComfyUI 并重新加载页面。

步骤 1：下载 SD 3.5 Medium 模型

下载SD 3.5 Medium FP8 检查点模型并将其放在文件夹ComfyUI > models > checkpoints中。

https://huggingface.co/Comfy-Org/stable-diffusion-3.5-fp8/blob/main/sd3.5_medium_incl_clips_t5xxlfp8scaled.safetensors

步骤 2：加载 ComfyUI 工作流

SD 3.5 Medium 检查点模型使用默认工作流程，但您必须将其设置为适当的分辨率。以下是工作流程。

https://stable-diffusion-art.com/wp-content/uploads/2024/11/SD3.5-medium-fp8.json

将其放到你的 ComfyUI。

按下队列提示来生成图像。

稳定扩散 3.5 中等设置

采样方法

我的简短实验表明，并非所有采样方法和计划都适用于 SD 3.5 Medium。我会继续使用Euler的正常计划。

CFG 规模

CFG比例控制着提示的遵循程度。与 SD 1.5 和 SDXL 相比，稳定扩散 3.5 中等模型在较低的 CFG 值下饱和。因此，CFG 值为 3 – 4 是 SD 3.5 中等模型的最佳值。

CFG 2

CFG 3

CFG 4

图片大小

SD 3.5 Medium 模型以 256 → 512 → 768 → 1024 → 1440 的混合分辨率逐步进行训练。以下是不同分辨率的图像。

256×256

512×512

768×768

1024×1024

1440×1440

虽然 SD 3.5 Medium 型号可以生成从 256 到 1440 像素分辨率的图像，但 1024 像素似乎是最佳分辨率。

如何学习Comfyui？

ComfyUI 和大家熟知的 WebUI 一样，都是 Stable Diffusion 的一种用户界面，一句话，一张图，随时随地创作任何内容。

但是具体到个人，只能说是：

“最先掌握AI的人，将会比较晚掌握AI的人有竞争优势”。

这句话，放在计算机、互联网、移动互联网的开局时期，都是一样的道理。

我在一线互联网企业工作十余年里，指导过不少同行后辈。帮助很多人得到了学习和成长。

我意识到有很多经验和知识值得分享给大家，也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑，所以在工作繁忙的情况下还是坚持各种整理和分享。但苦于知识传播途径有限，很多互联网行业朋友无法获得正确的资料得到学习提升，故此将并将重要的Comfyui资料包括Comfyui入门学习思维导图、商业级Comfyui工作流、视频教程、实战学习等录播视频免费分享出来。