阿里妈妈创意团队近日开源了一个令人振奋的 AI 图像修复模型:FLUX-Controlnet-Inpainting。
它结合了 FLUX.1-dev 和 ControlNet 的优势,能够以更高质量完成图像修复,还可以根据用户的指令调整图像风格,从而在修复过程中保留创意灵活性。
适用于从日常图像修复到高级艺术风格转换等多个场景需求。目前处于alpha测试阶段。
项目特点
-
两大技术优势结合:将
FLUX.1-dev
的开发框架与ControlNet
的强大图像生成与控制技术结合,使模型既具备图像修复的高精度,又能够根据控制指令灵活变换图像风格。 -
自然语言描述修复:用户可以通过语言描述对图像进行修复,无需繁杂的技术操作,极大降低了使用门槛。这一特性非常适合非专业的设计师和艺术创作者使用。
-
风格化转换能力:除了修复图像的细节问题,模型还具备在修复过程中灵活改变图像风格的能力。例如将现代风格转换为经典艺术风格,或根据用户指令进行创意变化。
效果展示
服装换装
提示词:“一位金发女子身穿红白相间的长裙坐在桌子上。她手里拿着一部绿色的手机,似乎在拍照。她旁边的桌子上放着一个包,旁边的椅子上也放着一个手提包。这位女士面带微笑地看着电话。背景包括左侧墙壁上的电视和右侧的沙发。场景中还出现了一把椅子。”
房间元素替换:空调替换
输入图像 |蒙版图像 |SDXL 修复 |最终效果
适用场景
-
老旧照片修复:让泛黄或破损的老照片焕然一新。
-
艺术作品修复:帮助美术工作者在数字作品中修复细节,并轻松改变画风。
-
图像风格转换:不仅可以修复,还可以根据描述改变风格,如将现代照片转化为复古风格。
GitHub:https://github.com/alimama-creative/FLUX-Controlnet-Inpainting
如果你对 AI 图像处理感兴趣,FLUX-Controlnet-Inpainting 模型的创新与潜力不容错过!