效果惊艳!这些 Flux Tools 工作流你必须拥有

Flux自发布以来,一直稳坐AI绘画的头把交椅。围绕Flux官方模型,社区也做了大量的积极反馈,各种衍生模型层出不穷。不过一直比较遗憾的是:Flux的ControlNet模型效果都不咋滴,常用的Canny、Depth、Pose等Flux版本的ControlNet模型虽然也能找到,但是生成的图片往往控制效果不佳或者质量较差。

不过,最近黑森林工作室(Flux官方)发布了 Flux.1 Tools 系列模型,使用这些新模型可以获得很好的图片生成控制效果,最重要的是生成的质量也很不错,无论是局部重绘、图片高仿,还是风格合成,甚至模特换装、产品换背景都有不错的效果,算是补上了Flux生图的可控性短板。

效果展示

废话不多说,先看效果。

Flux.1 Tools 介绍

FLUX.1 Tools 包含四个不同的功能:

  • FLUX.1 Fill:最先进的修复模型,结合文本提示词,可用于局部重绘和一键扩图。

  • FLUX.1 Depth:基于深度图的结构,结合文本提示词,生成新的图片,实现Depth ControlNet的能力。

  • FLUX.1 Canny:基于线稿图的结构,结合文本提示词,生成新的图片,实现Canny ControlNet的能力。

  • FLUX.1 Redux:生成图片的变种或者说是风格迁移,实现类似 IPAdapter 的能力。

下边就来给大家展示下这些工具的处理能力,因为SD WebUI生态对 Flux 的跟进比较缓慢,这里将以ComfyUI为例进行讲解,大家本地跑不起来的可以使用我的云镜像,插件和模型都已经装好了,可以直接体验。

云镜像地址(电脑端使用):https://haoee.com/applicationMarket/applicationDetails?appId=27&IC=XLZLpI7Q

Flux.1 Fill

我们将演示 Flux.1 Fill 模型的两个能力:局部重绘和一键扩图。

先看局部重绘:首先上传一张图,然后给需要重绘的区域添加遮罩,编写新效果的提示词,加载Flux.1 Fill模型,最后点击生成就可以了。这里使用的Fill模型是一个原版模型的量化版本,使用的显存更少,生图的质量损失很小。

再看一键扩图,相比“一键重绘”,主要的改变是使用“外补画板”来创建扩图区域的遮罩。

有了Flux.1 Fill,我们可以完全抛弃之前的Foocus局部重绘了,过渡更自然,生图质量更高。

FLUX.1 Depth

Flux.1 Depth 是一个使用深度图控制图像生成的模型,我们先要使用相应的ControlNet预处理器生成深度图,然后再作为生图条件传给采样器进行处理。除了使用深度图作为生图条件,我们还可以结合文本提示词条件,这样可以获得更多的控制效果。

为了增强 Depth 控制的灵活性,黑森林工作室还从 Flux.1 Depth 中提取出了一个 LoRA模型,这样我们就可以在自己训练的Flux模型上叠加官方提供的 Depth 控制能力了,不过效果会比原版的 FLUX.1 Depth 模型差一点点。

FLUX.1 Canny

Flux.1 Canny 是一个使用线稿图控制图像生成的模型,我们先要使用相应的ControlNet预处理器生成线稿图,然后再作为生图条件传给采样器进行处理。除了使用线稿图作为生图条件,我们还可以结合文本提示词条件,这样可以获得更多的控制效果。

黑森林工作室同样从 Flux.1 Canny 中提取出了一个 LoRA模型,我们可以在自己训练的Flux模型上叠加官方提供的 Canny 控制能力了,效果也是会比原版的 FLUX.1 Canny 模型差一点点。

FLUX.1 Redux

FLUX.1 Redux 是一个变种生成模型,它可以参考现有图片生成一张类似的图片,我们还可以参考多张图来生成新的图片,这种能力和之前常用的IPAdapter效果比较类似。

先看这个基本的变种图生成,输入一只猫咪图,生成类似的猫咪图。

再来看一个现实猫咪和卡通青蛙的合体。

最后官方的Pro版本可以通过提示词生成不同风格的重绘图,但是免费模型没有这个能力,不过社区在这块搞出了很多发明创造。比如下边的图是通过结合其它重绘处理,生成了结构类似但风格不同的新图片。

另外基于 Flux Fill + Redux 的模特换装、产品换背景、图案迁移等,社区都已经搞出来了,后续我也会给大家介绍。

资源下载

请添加图片描述
为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。

由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取
请添加图片描述

一、ComfyUI配置指南

  • 报错指南
  • 环境配置
  • 脚本更新
  • 后记

img

二、ComfyUI基础入门

  • 软件安装篇
  • 插件安装篇

img

三、 ComfyUI工作流节点/底层逻辑详解

  • ComfyUI 基础概念理解
  • Stable diffusion 工作原理
  • 工作流底层逻辑
  • 必备插件补全

img

四、ComfyUI节点技巧进阶/多模型串联

  • 节点进阶详解
  • 提词技巧精通
  • 多模型节点串联

img

五、ComfyUI遮罩修改重绘/Inpenting模块详解

  • 图像分辨率
  • 姿势

img

六、ComfyUI超实用SDXL工作流手把手搭建

  • Refined模型
  • SDXL风格化提示词
  • SDXL工作流搭建

img

由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取

请添加图片描述
img

### Comfui Flux 工作流概述 Comfui Flux 是一种用于简化前端开发流程的工作流工具,旨在提高开发者效率并保持项目的一致性和可维护性。通过集成多种插件和支持自动化操作,该工作流能够处理 UI 设计、代码格式化、静态分析等多个方面[^1]。 #### 安装与配置 为了使用 Comfui Flux 工作流,首先需要安装必要的依赖项: ```bash npm install -g comfui-flux ``` 接着,在项目的根目录下创建 `flux.config.js` 文件来定义具体配置选项。此文件允许自定义各种行为,如指定使用的插件列表及其参数设置等。 #### 基本命令 以下是几个常用的命令行指令,可用于执行不同类型的构建任务或启动服务: - **初始化新项目**: 使用默认模板快速搭建一个新的应用程序结构。 ```bash flux init my-app-name ``` - **运行本地服务器**: 启动带有热重载功能的 Webpack 开发环境。 ```bash flux serve ``` - **打包生产版本**: 将应用编译成适合部署的形式,并优化资源加载性能。 ```bash flux build --prod ``` #### 插件支持 得益于其灵活的设计理念,Comfui Flux 支持广泛的第三方扩展模块,涵盖了从界面美化到文档生成在内的众多领域。例如: - **UI 组件库**:提供预设样式组件以加速页面布局设计过程; - **代码质量检测器**:自动扫描潜在错误并给出改进建议; - **持续集成平台对接接口**:方便团队协作时实现无缝衔接 CI/CD 流程。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值