一、介绍
之前给大家分享过ACE++, 是阿里新开源的基于指令的图像创建和编辑通过上下文感知的内容填充。
这个算是未来的一个趋势,不过之前测试下来发现抽卡率有点低,这几天想着如何提高它的抽卡率,它的效果其实和Redux有点类似,但是Redux更多的是图片起效果,而ACE++ 是提示词起效果,然后他们都是通过拼图来实现一致性的,所以灵机一动,这2个是否可以结合使用呢。
今天就来给大家测试一番,试试多图融合,是否可以有奇效。
二、工作流分享
下面是我测试的工作流,不复杂,就是把他们2个都用上了
我们这一次,提供2个参考图
第一步就是先把这两行图上下拼图下,一会当做参数
控制最长边为1024
然后接入Redux和ACE++
ACE++ 我这里用的是 subject这个lora
REdux使用的是第三方插件,权重设置了3,这样图片参考即生效,提示词也要作用,这也是我测试下来效果比较好的值了。
大家可以自行调整参数尝试。
左下角图片中的美女端着左上角图片里面的咖啡,背景在咖啡店,保持人物和服装不变
不同方案的对比效果
不使用ACE++ LORA,只使用Redux,效果如下
效果不是很好,我权重设置3,所以提示词还是有作用的
不使用Redux,就使用ACE++ lora的时候,抽卡率比较低
很久才抽出合适的,但是提示词生效了,场景也有还原,在咖啡厅了,但是人物抽了好几次,还是有点区别。
下面是同时用上ACE++ LORA和Redux,明显抽卡率提高了
可以看到效果是三张里面最理想了
所以,这次测试下来,感觉有效果,二者是可以配合使用的,能提高抽卡率以及对提示词的理解程度,大家也可以试试看。
下面我们换其他图也来跑跑效果。
图片中的哪吒手里拿着图片里面的汉堡,保持背景和人物一致性
图片中的道士手里拿着图片里面的汉堡,保持背景和人物一致性
图片中的土拨鼠手里拿着图片里面的汉堡,保持背景和人物一致性
哈哈哈,有意思,多张图溶图玩法挺好玩的
以前就使用Redux,但是Redux迁移的话,动作无法变化太大,现在配合上ACE++,提取他们各自的优势,结合使用,没想到出来的效果还不赖。
三、云端镜像
大家如果没有本地 ComfyUI 环境,或者本地显卡配置低于 16G 的,可以使用嘟嘟部署的仙宫云镜像,可直接加载使用。后续分享的工作流都会更像到镜像中,一周更新一次,方便大学学习。
目前整合了2个镜像,一个是Flux绘图用的,另外一个是针对视频模型的,之所以分开是一些模型兼容问题,分开比较好处理。
今天这个数字人案例已经弄到镜像上了,欢迎体验。
镜像名称:嘟嘟AI绘画趣味学
云平台镜像地址:
https://www.xiangongyun.com/image/detail/d961a7dc-ade3-4bd5-a7c6-92ac49ff5e4b?r=37BCLY
https://www.xiangongyun.com/image/detail/81716d29-4461-4b0b-ba4b-7b9b7dd569d3?r=37BCLY
新用户通过邀请码注册,总共可获得 8 元奖励,体验 4 个小时的 4090 作图时长。
四、总结
以上就是这次的Redux结合ACE++的测试了,整体上抽卡率会比以前提升了一些,后面再继续研究各种搭配。
夸克网盘链接:https://pan.quark.cn/s/4f1b61a4a638