[Comfyui] 新神登场,电商神器,阿里ACE++发布!无需训练,一图实现换装/换脸/万物迁移

阿里通义实验室最新开源的ACE++ —— 这个被称为“AI图像编辑革命”的工具,彻底颠覆了传统设计流程!只需一张图,无需训练,就能实现角色换装、品牌迁移、场景重构。

简介

官方介绍,ACE ++,这是一个基于指导的扩散框架,可解决各种图像生成和编辑任务。受到Flux.1-Fill-Dev提出的介入任务的输入格式的启发,我们改善了ACE中引入的长篇小说条件单元(LCU),并将此输入范式扩展到任何编辑和生成任务。为了充分利用图像生成先验,我们开发了一个两阶段的训练计划,以最大程度地降低对强大的文本对图像扩散模型(如Flux.1-DEV)的努力。在第一阶段,我们使用任务数据与文本图像模型的0-REF任务进行预训练。社区中有许多模型基于文本对图像基础模型的培训,这些模型符合第一阶段的培训范式。例如,Flux.1-Fill-DEV主要处理绘画任务,可用作加速训练过程的初始化。在第二阶段,我们使用ACE中定义的所有任务支持上述模型,以支持一般指令。为了在不同的情况下促进ACE ++的广泛应用,我们提供了一套全面的型号,涵盖了完整的登录和轻量级的登录,同时考虑了在垂直方案中的一般适用性和适用性。定性分析在产生图像质量和及时以下能力方面展示了ACE ++的优势。

三大Lora模型介绍

1. comfyui_local_lora16.safetensors : 主要用作本地蒙版编辑内容,涂抹区域即可增删物体

2. comfyui_portrait_lora64.safetensors: 主要用作人物肖像迁移

3. comfyui_subject_lora16.safetensors: 主要用作物体特征保留迁移,商品 logo 迁移等

三个模型分别对应不同的使用场景,下面会依次对三种模型进行测试,我们下载对应模型放在 Comfyui>>models>>loars 目录下即可

模型下载地址:

https://huggingface.co/ali-vilab/ACE_Plus/tree/main

核心能力演示

电商场景Logo打印

使用lora模型:comfyui_subject_lora16.safetensors

参考图:

提示词:

Place this icon in the center of a sleek black leather wallet on a wooden table.``   ``将此图标放在圆滑的黑色皮包钱包的中央,放在木桌上。

结果:

示例2 :

参考图:

提示词:

Print the girl's design on a rucksack.``将女孩的设计印在一个帆布背包上

结果:

目标场景迁移

使用lora模型:comfyui_subject_lora16.safetensors

参考图:

提示词:

he duck is riding a skateboard in a skate park filled with colorful graffiti, anime style.``   ``鸭子在滑板公园里骑滑板,里面装满了五颜六色的涂鸦风格。

结果:

人物特征迁移

使用lora模型:comfyui_portrait_lora64.safetensors

参考图:

提示词 :

 `Maintain the facial features, A girl is wearing a neat police uniform with "HOPPS" labeled on it and sporting a badge with a cute Disney cartoon style like Officer Judy Hopps from "Zootopia". She has large, bright purple eyes, smiling with a friendly and confident demeanor. She stands in front of a microphone, seemingly giving a speech or presentation, with lively gestures that convey positive emotions. The background is blurred, featuring a cartoon logo of "Police Department".`  `保持面部特征,一个女孩穿着整齐的警察制服,上面标有“跳跃”,并带有一个带有可爱的迪士尼卡通风格的徽章,例如“ Zootopia”的军官Judy Hopps。她有大而明亮的紫色眼睛,以友好而自信的举止微笑。她站在麦克风面前,看似发表演讲或演讲,并带着活泼的手势传达了积极的情绪。背景模糊不清,带有“警察局”的卡通徽标。`

结果:

局部编辑

使用Lora模型:comfyui_local_lora16.safetensors

参考图:

提示词:

The logo is printed on the bottle.``徽标印在瓶子上。``   

结果:

可以看到我们将 log 迁移到了瓶身上

示例2:

参考图:

结果:

以上就是对 ali 新发布的ACE++ 的简单使用了,不得不说阿里的模型发布真的是实际生产力服务的啊,想一想这一套模型下来,在阿里自己的电商领域得发挥多大的价值哇

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉12000+AI关键词大合集👈

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值