阿里妈妈技术开源 FLUX 图像修复及蒸馏加速模型

1. 概述

阿里妈妈智能创作与AI应用团队近期开源了两项 FLUX 文生图模型的的实用配套模型。Black Forest Lab 的 FLUX [1] 文生图模型具有更高的生成画面质量和指令遵循能力，一经推出便受到业界广泛关注，也有很多优秀的控制插件和 Lora 微调模型陆续跟进。但是，通过修复（Inpainting）进行可控生成的插件还未有公开可用的模型，另一方面 FLUX 12B 的参数量会带来显著的推理时耗和计算开销。

我们针对这一行业需求进行了相关探索，开源了两个基于FLUX（FLUX.1-dev）的配套模型：ControlNet 图像修复模型 以及 8步加速的 Turbo 模型。更进一步，两个模型可互相兼容配合使用，达到更快的修复生图。两项开源模型收到了社区积极反馈，在 HuggingFace 社区居于趋势榜前列。本文介绍基于 FLUX 的 ControlNet 修复模型及蒸馏加速模型的设计思路，欢迎阅读交流和试用反馈。

🏷 FLUX修复ControlNet主页（已更新至Beta版本）：

• Huggingface地址：https://huggingface.co/alimama-creative/FLUX.1-dev-ControlNet-Inpainting-Beta

• ModelScope地址：https://www.modelscope.cn/models/alimama-creative/FLUX.1-dev-ControlNet-Inpainting-Beta

🏷 FLUX8步加速LoRA主页（Alpha版本）：

• Huggingface 地址：https://huggingface.co/alimama-creative/FLUX.1-Turbo-Alpha

• ModelScope 地址：https://www.modelscope.cn/models/alimama-creative/FLUX.1-Turbo-Alpha

两个模型均排名开源社区趋势榜前列 2024.10.16

2. 图像修复 ControlNet模型