前 言
相信不少AI绘画爱好者对曾风靡一时的OminiControl技术仍有印象。这项以图像灵活编辑与精准控制著称的创新技术，在发布初期便引发行业热议。遗憾的是，由于ComfyUI原生不支持该功能，此前一直未能与大家分享相关教程。尽管期间陆续涌现出多款适配ComfyUI的OminiControl插件，但在实际测试中，受限于插件兼容性与配置复杂性，始终未能实现稳定运行，这也成为我心中的一大遗憾。
今天我们可以来好好介绍一下了，OminiControl 是一个基于 FLUX.1 架构的图像生成框架，旨在通过最小化的设计实现对图像生成过程的高效控制。
尤其是在图像的一致性生成方面有奇效！具体我们直接来看效果！
好了，话不多说，我们直接开整！
先说下，模型有 30 多个G，我 24G 显存跑着都有点费劲，所以出图速度很慢。建议 16 显存以下的小伙伴就不要轻易尝试了，可以等后续的显存优化版本。
我们先直接来看下效果，左边是参考图，右边是生成的效果图，可以看到参考图中的主体被完美的迁移到了右边的效果图中，包括文字生成也是延续了 Flux 的精准。
提示词：The close-up of this project is placed on a wooden table with a dark room in the background. The TV is on and a cooking program is playing on the screen, displaying the words “Omini Control”
简单的商品的迁移也是非常不错的，就是只能生成 512 * 512 的分辨率有点模糊。
提示词：In a Bauhaus style room, this item is placed on a shiny glass table, with a vase of flowers next to it. In the afternoon sun, the shadows of the blinds are cast on the wall.
提示词和上边的一样，这个迁移效果也相当不错。
提示词：In the Bauhaus style room, this item is placed on the sofa In the afternoon sunshine, the shadow of the blinds projected onto the wall
小猫咪迁移得也不错。
提示词：A close up view of this item. It is sitting on a book, which is placed on a glass table with the words’ FLUX 'written on its cover
再来试个不常见的物种，细节上迁移的也还是很不错的。
以下这件衣服的迁移看着也还行，但是总怎么感觉哪里不太一样的赶脚。
提示词：A lady is standing at the entrance of a bar, wearing this outfit
但是也有翻车的时候，比如下边这张图，虽然看着很像，但是还多送了我一截沙发，也是蛮大方的。
这份完整版的AI绘画全套学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
有些图迁移效果就不错，有些就会翻车，但是每次出图的确太费劲，没有尝试太多场景，暂时也没找到啥规律。
这个项目本身的训练数据中缺乏人类数据，所以是不建议我们直接迁移人类的，不过我们也可以来尝试一下。
提示词：A close up view of this item.It sat in a chair
这咋还站在椅子上了呢，不过大致也是像模像样的。
插件暂时还没有收录到 ComfyUI 管理器里边，所以需要我们手动下载，插件没有依赖包，不过需要 diffusers 的版本是 0.31.0，不是的小伙伴可以手动升级一下。
插件地址：
我们来看下工作流，工作流本身是很简单的，现在模型本身只支持 512 * 512，所有项目会把输入的图片进行居中裁剪成 512 * 512 分辨率的图片，所以听雨这里加了一个图像缩放的节点，直接缩放到 512 * 512 分辨率。
不过不加这个节点好像也行，不知道是不是插件本身做了处理。
这里提示词的编写上也是有格式要求的，this item 或者 the object 来代指我们的参考图中的主体，用 it 来进行引用。
比如：A close up view of this item. It is placed on a wooden table.
这里有个小问题，工作流节点中的随机数种子貌似不生效，每次生成的内容都一样。
OminiControl 除了以上的功能外，其实还支持局部重绘以及一些 ControlNet 的功能，局部重绘我们不讲了，本身 Flux 就支持，效果也比这个好。
其实 ControlNet 的功能也没啥好讲的，今天主要的内容是一致性迁移功能。不过我们稍微介绍一下吧，Canny 和 depth，flux 本身就有对应的模型，我们就不演示了，主要来看下 coloring 和 deblurring。
coloring：着色，可以用来给线稿图上色，也可以用来替换原来的颜色。
deblurring：模糊转高清功能，只能说看着像，细节差些意思。不过的确是变高清了，画质是挺不错的。
总体来说，一致性迁移上效果还是很不错的，主要是工作流很简单，某些场景上比 OmniGen 的效果更棒。不过现在的 ComfyUI 版本还是一个不完全的版本，并且只支持 FLUX.1-schnell 模型，我们可以等等后续的优化版本。
关于生成速度，生成速度也没啥规律，24G 显存反正是已经跑满了，有时候很快，一分钟以内，有时候要四五分钟，有时候要十分钟，搞不懂。
不想本地安装的小伙伴也可以在线体验：
https://huggingface.co/spaces/Yuanshi/OminiControl
好了，今天的分享就到这里了，感兴趣的小伙伴可以是试试哦！
网盘链接：
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！
对于0基础小白入门：
如果你是零基础小白，想快速入门AI绘画是可以考虑的。
一方面是学习时间相对较短，学习内容更全面更集中。
二方面是可以找到适合自己的学习方案
包括：stable diffusion安装包、stable diffusion0基础入门全套PDF，视频学习教程。带你从零基础系统性的学好AI绘画！
零基础AI绘画学习资源介绍
👉stable diffusion新手0基础入门PDF👈
（全套教程文末领取哈）
👉AI绘画必备工具👈
温馨提示：篇幅有限，已打包文件夹，获取方式在：文末
👉AI绘画基础+速成+进阶使用教程👈
观看零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。
温馨提示：篇幅有限，已打包文件夹，获取方式在：文末
👉12000+AI关键词大合集👈
这份完整版的AI绘画全套学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
扫一扫
583
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
