ComfyUI 首次支持 Flux Tools：带来更精确的图像生成控制

AI绘画月月

于 2025-03-29 15:20:41 发布

阅读量288

点赞数 4

文章标签：计算机视觉人工智能图像处理 AI作画 midjourney comfyui chatgpt

本文链接：https://blog.csdn.net/2401_84760719/article/details/146689151

版权

ComfyUI 首次支持 Flux Tools：带来更精确的图像生成控制

在图像生成和编辑领域，ComfyUI 的发展一直受到用户和开发者的广泛关注。最近，ComfyUI 宣布对 Flux Tools 进行首批支持，这一功能的推出无疑是一个令人激动的消息。这意味着用户可以在 ComfyUI 上使用 Black Forest Labs 为 Flux.1 系列所设计的全新 3 系列模型，包括 Re dux 适配器、填充模型、ControlNet 模型 和 LoRA（深度和 Canny），这些新增的工具将使得图像生成和编辑的过程更加精准和灵活。

那么，Flux Tools 的这些新功能到底能为用户带来哪些创新和便利呢？接下来，我们将逐一解析每个模型的特点和应用，帮助你更好地了解如何使用它们。

1. Flux.1 填充模型：图像修复与无缝扩展

Flux.1 的 Fill 模型 是一个旨在通过输入的蒙版和提示修复图像的工具，特别适用于图像修补和扩展工作。

功能亮点：

修复缺失区域：如果图像中有缺失的部分，Fill 模型能够智能地根据输入的蒙版和提示自动修复这些区域。
延伸图像：它还能够无缝扩展图像内容，保持整体风格和结构的一致性。
输入要求：用户需要提供一张输入图像、一个黑白的输入蒙版（尺寸与输入图像相同）以及一个文本提示。

对于填充任务，ComfyUI 的 CLI（命令行界面）功能将会自动根据输入图像和蒙版的尺寸，推断生成图像的合适大小，使得用户无需过多干预，便能快速开始工作。

如何使用：

更新 ComfyUI 至最新版本。
将 clip_l 和 t5xxl_fp16 模型下载并放置到 models/clip 文件夹中。
下载 Flux1-fill-dev.safetensors 文件并放置在 ComfyUI/models/unet 文件夹内。
按照示例页面上的工作流程进行操作，开始填充修复或扩展任务。

2. Flux.1 Redux：快速生成图像变体

Redux 模型 是一种轻量级的适配器，它能够快速生成特定风格的图像变体，非常适合想要在短时间内进行风格变换的用户。

功能亮点：

风格变换：用户只需提供一张输入图像，Redux 模型会自动生成符合原图风格、调色板和构图的图像变体，且无需额外的提示。
输入输出：输入为原始图像，输出为基于该图像风格和结构的多种变体，非常适合快速设计风格化的图像。

如何使用：

更新 ComfyUI 至最新版本。
下载 sigclip_patch14-384.safetensors 文件并放置在 ComfyUI/models/clip_vision 文件夹中。
确保 flux1-dev 模型位于 ComfyUI/models/unet 文件夹内。
下载 Redux 模型到 ComfyUI/models/style_models 文件夹。
访问示例页面，按照展示的工作流程进行操作，开始创建图像变体。

3. ControlNet 模型：深度控制与精确调节

ControlNet 模型 是 Flux Tools 中一项强大的功能，它通过将特定的地图（如深度图或边缘图）作为条件来加强生成过程，从而提供更加精细的控制和精准的输出。

ControlNet 模型主要有以下两种类型：

深度模型：使用深度图引导图像的透视和结构，使得生成的图像在空间感和结构上更加真实。
Canny 模型：通过使用 Canny 边缘图，用户可以对图像的轮廓进行精确调节，生成更具结构感的图像。

**
**

功能亮点：

深度图引导：利用深度图来帮助模型理解物体的空间关系，使生成的图像在视觉上更加有层次和真实感。
边缘图调节：通过 Canny 边缘图进行的轮廓调节，让用户能够更精准地控制图像的细节和边缘效果。

如何使用：

准备一张输入图像、一份文本提示以及一个深度图或 Canny 边缘图。
在 ComfyUI 中选择 ControlNet 模型，并根据需求提供相应的图像作为条件。
输出图像将严格遵循输入的结构和提示，确保生成的图像符合预期的视觉效果。

4. LoRA（深度与 Canny）：增强模型效果

LoRA（Low-Rank Adaptation）是一个深度学习技术，用于通过微调和适应现有模型来提升性能。在 Flux.1 中，LoRA 模型与 深度图 和 Canny 边缘图 相结合，进一步增强图像生成的效果。

功能亮点：

深度 LoRA：通过与深度图结合，LoRA 可以帮助模型更好地适应复杂的空间和结构调整。
Canny LoRA：结合 Canny 边缘图，LoRA 能够优化生成过程中的边缘和轮廓效果，提升图像的精细度和清晰度。

如何使用：

将 LoRA 与 Flux.1 的 Depth 或 Canny 模型一起使用，提供相应的输入和条件。
根据需求调整参数，确保生成的图像符合精确控制的要求。

ComfyUI 对 Flux Tools 的支持，特别是新增的 填充模型、Redux 适配器、ControlNet 模型 和 LoRA，为用户提供了更多创作和编辑图像的可能性。这些工具的引入，不仅能提升图像生成的精度与细节控制，还能让用户在创作过程中拥有更大的自由度和灵活性。无论是图像修复、风格变换，还是精确的深度与边缘控制，Flux Tools 都能满足用户对图像生成的高需求，让创意实现更加轻松和高效。

想要体验这些新功能的用户，可以通过更新 ComfyUI 并按照示例页面中的步骤进行操作，迅速掌握如何运用这些先进的工具。随着技术的不断进步，未来的图像生成领域必将迎来更多的创新与惊喜。

为了帮助大家更好地掌握 ComfyUI，我在去年花了几个月的时间，撰写并录制了一套ComfyUI的基础教程，共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。