【Comfyui工作流】电商次世代，Comfyui + Nunchaku + Flux 低显存本地也可以实现万物迁移

本文链接：https://blog.csdn.net/2301_80239908/article/details/147893445

该工作流的实现主要使用Flux Fill + Flux Redux 联合控制完成，实现参考图片100%迁移效果。

Flux Fill 是一种 AI 模型，专门用于填充图像的缺失或遮罩部分。它擅长生成与现有图像无缝融合的内容，保持风格、照明和上下文的一致性。当您需要添加新元素或从照片中删除不需要的对象时，它特别有用。

Flux Redux 是一个互补模型，专注于提高 inpainted 区域的质量和连贯性。它通过改进细节、确保更好地与原始图像集成以及在编辑区域之间保持视觉一致性来帮助优化 Flux Fill 的结果。

这些模型共同创建了一个强大的图像编辑工作流程，与标准的修复方法相比，它可以产生更自然、更专业的结果。它们在与参考图像一起使用时特别有效，这有助于指导 AI 生成符合您特定需求的内容。

简单来说就是使用 Flux fill 实现图像局部重绘，Flux Redux 实现参考物体控制

看下实现效果：

将模特手中的包进行替换

在这里插入图片描述

如何在ComfyUI中实现

实现主要环境:

Nunchaku 量化环境安装Flux Fill 模型下载Flux redux 模型comfyui-florence2 插件安装MiaoshouAl/Florence-2-base-PromptGen-v2.0 模型下载

工作流实现分步：

加载图片

在这里插入图片描述

本步骤实现参考图和需要替换的原图，并在原图中标记出需要替换的范围蒙版

图像拼接及蒙版拼接

在这里插入图片描述

将主体图和参考图拼接到一起，并且将拼接后的蒙版进行显示处理。

模型加载设置

在这里插入图片描述

加载 Flux-fill 模型和 Flux-redux 模型，使用 Nunchaku 量化版本加载，降低显存需求本地显存支持；

图像识别，提示词处理

在这里插入图片描述

将主图和参考图由 florence 反推出来的提示词进行拼接输出，传入 clip 作为正向提示词；

图像生成

完成以上配置后点击生成按钮即可完成图像生成

在这里插入图片描述

总结

以上即使用Flux生图在本地实现物体完美迁移的方案，使用该方法可以很快捷方便的实现，室内设计填充、产品编辑、服装编辑等各种物体替换、优化场景。当然还有更多有趣的场景等待大家的挖掘。

为了帮助大家更好地掌握 ComfyUI，我在去年花了几个月的时间，撰写并录制了一套ComfyUI的基础教程，共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。