更真、更像、更美:阿里妈妈重磅升级淘宝星辰视频生成大模型 2.0

▐ 淘宝星辰 · 懂你,更懂电商

【淘宝星辰】 是由阿里妈妈基于自研的淘宝星辰视频生成大模型推出的视频AIGC工具。近日,淘宝星辰视频生成大模型重磅升级 2.0,同步升级并上线【淘宝星辰 · 图生视频 2.0】!

通过对数据飞轮、3D VAE、淘宝星辰视频生成大模型等核心模块的全面升级,【淘宝星辰·图生视频 2.0】在AIGC的“真、像、美”核心三维度显著提升,抽卡成功率和过审率均达到了规模化的要求。

✅ 更真:语义遵循能力、生成画面真实度显著提升,让AI视频更接近真实世界。

✅ 更像:人脸、商品、场景等细节内容的保持能力显著提升,时间虽然流逝,但“人货场”始终一致。

✅ 更美:无论是人体肤感、还是画面质感、亦或是环境光感,从多维度提升视频美感。

✅ 规模化应用:抽卡成功率和过审率显著提升,逐渐实现ToB、ToC的多款工具接入、业务场景规模化供给和覆盖,解决短视频智能创作的视觉素材供给难题。

👉🏻 体验地址:https://agi.taobao.com/

// 目前仅对淘宝天猫商家开放,普通用户请耐心等待~

▐ 淘宝星辰视频生成大模型 2.0

2025年1月,阿里妈妈正式发布了淘宝星辰视频生成大模型以及【淘宝星辰 · 图生视频】,实现了更懂电商的视频生成效果。(👉🏻详情参见:懂你,更懂电商:阿里妈妈推出淘宝星辰视频生成大模型及图生视频应用

在过去的两个月里,经过多团队的密切协作,我们在数据飞轮、3D VAE、淘宝星辰文生视频、淘宝星辰图生视频等多个核心模块进行全面优化,正式升级为【淘宝星辰视频生成大模型 2.0】,同步发布工具【淘宝星辰·图生视频 2.0】:

  • 人工评测:通过对真、像、美等核心效果维度进行人工盲评,淘宝星辰2.0 vs 淘宝星辰1.0 胜出率高达78.5%,在视频生成上更真、更像、更美!

  • 成功率与过审率:无用户指令的情况下,一次抽卡成功率和视频过审率显著提升,视频生成能力已经达到规模化的要求!

淘宝星辰视频生成大模型2.0
淘宝星辰视频生成大模型2.0

▐ 更真、更像、更美的图生视频 2.0

工具升级:保持工具简洁的操作的同时,提供淘宝星辰2.0与1.0版本选择、标清与高清的模式切换,更有通过多选结果进行一键成片的短视频生成!

67db943ca28e1e078fb131a862f3c9c1.jpeg
淘宝星辰·图生视频 2.0

更真 语义遵循能力、生成画面真实度显著提升,让AI视频更接近真实世界。
淘宝星辰1.0淘宝星辰2.0
cc5ce31fc6c2dc202829bd0ad68bbe7d.gif

0dc54305214181aeebbc4115b926d112.gif

prompt:两半饼被拉开,中间的拉丝不断开

淘宝星辰1.0淘宝星辰2.0

12c322e480a97bd08caedf63a83f7a96.gif

3c77ff2e2aa5023c10ee4871f41f418d.gif

prompt:画面中的人双手捧起一只白色大公鸡,抱在胸前

淘宝星辰1.0淘宝星辰2.0

e64d0967511faefe6521bed47ddb68b8.gif

38591fb7ed06c4e79e17b775eac95bd1.gif

prompt:茶汤倒入茶碗中,茶水冒出热气,茶碗装满茶水之后停止倒水‍

淘宝星辰1.0淘宝星辰2.0
58f0c3fdfbcfd1375758cc5817f68fe7.gife17acf172226966c4bd95b6c84d14cb2.gif

prompt:镜头保持静止,男子对着镜头摆出健美造型,肌肉感明显,看上去非常强壮

淘宝星辰1.0淘宝星辰2.0
334071d1c4b6b202993afb02aeb62aa5.gif59e5033ab72f0cd9cc58b0654f57caf9.gif

prompt:镜头保持静止,男子和女子微笑着看着对方,突然抱在一起大哭起来

✅ 更像:人脸、商品、场景等细节内容的保持能力显著提升,时间虽然流逝,但“人货场”始终一致。

淘宝星辰1.0淘宝星辰2.0
d22c2b90fcc59932da748617b25919ef.gif7186a0bd81f9ea165ae9864fce117f81.gif

prompt:模特走向镜头,展示衣服

淘宝星辰1.0淘宝星辰2.0

fdaa31109f51b278316aece0ecae7f23.gif

046ee8b332cd3399644181a13d697d38.gif

prompt:模特对着镜头展示裤子‍

淘宝星辰1.0淘宝星辰2.0
17b9c04b09733346b4541b9f9aa2e201.gife160dff298155b917832bf983da4634a.gif

prompt:一位美丽的亚洲年轻女士穿着一件长袖淡棕色毛衣、深色紧身牛仔裤和黑色高跟鞋,优雅地展示她的穿搭。她的发型是直发,披肩而下,颜色是粉红色

✅ 更美:无论是人体肤感、还是画面质感、亦或是环境光感,从多维度提升视频美感。

淘宝星辰1.0淘宝星辰2.0
cec513213f0f28c6ccc01b03bfd0a877.gif9945db8bb18deb48f4fb82adce8e9105.gif

prompt:光影变化扫过模特的脸颊,模特对着镜头微笑了一下

淘宝星辰1.0淘宝星辰2.0
5ffeefb8bc84f2c4dcc3fd1b30dca588.gif339a0705f3d39a30af640291c3de84a2.gif

prompt:微风吹过模特的头发,发丝随风飘动

淘宝星辰1.0淘宝星辰2.0
00f4c1716906a9da5022f50b162ccb7d.gifa7f018a66e550ab84b30c25a0e547535.gif

prompt:随着模特的手部动作,脸上磨搓起泡

淘宝星辰1.0淘宝星辰2.0
b9efab6b312ce0c6e33dd4342dfa2833.gif5e6ddd55769162af6ba08070f1652d59.gif

prompt:画面中的人坐上一朵云彩,一飞冲天,直到消失

淘宝星辰1.0淘宝星辰2.0
1299012005b5badfd92700f4a893ddb2.gif8aa19f6aea520540d83fe92a2815b00c.gif

prompt:一个人给女生一束郁金香,女生把花举在胸前,露出面部,面带微笑

淘宝星辰1.0淘宝星辰2.0
8208d7082600edf1123f303880c4bbe3.gif

86d40ec2ddd6bd10fbf83a9d0045cd1f.gif

prompt:模特慢慢地举起一只手放在脸上,手指轻轻擦过眼镜

✅ 规模化应用:抽卡成功率和过审率显著提升,逐渐实现ToB、ToC的多款工具接入、业务场景规模化供给和覆盖,解决短视频智能创作的视觉素材供给难题。

目前【淘宝星辰 · 图生视频 2.0】除了上文中已上线的万相营造工具入口,同时已经在阿里妈妈广告主工具平台(ToB)、AI试衣产品Lookie(ToC)中上线应用。

另外,【淘宝星辰 · 图生视频 2.0】已经开始应用于阿里妈妈广告业务批量化生产信息流V视频创意、供给短视频生产所需的基础视觉片段、支持淘宝天猫多个行业的视频内容需求等规模化场景。期待与感兴趣的业务&应用方共同探索更多精彩应用场景!

1. 信息流广告V视频创意投放示例

广告1:半高领打底衫广告2:打底裤

df1880f8afcd299568317558f5dbe811.gif

89bf18d62c0c38b3926a8d2ad6e2da4c.gif

2. 万相营造工具入口

3. 广告主工具平台(BP)入口
4. Lookie淘宝体验入口

第一步:淘宝搜索
lookie
第二步:进入“全面整活创意视频”第三步:选择玩法,开始生成

453d271d297191978bcea00c27a9c0c9.png

7206df64a07139bcc84e763e6b9bfa3e.png

150072ab77acf47a2595e154c72a2023.png


▐ 关于我们

我们是阿里妈妈智能创作与AI应用,专注于智能创意创作与投放、AIGC、LLM应用等方向,欢迎各业务方关注与业务合作。同时,真诚欢迎具备CV、NLP和推荐系统相关背景同学加入!

📮 简历投递邮箱

alimama_tech@service.alibaba.com

END

图片

也许你还想看

👉🏻 淘天阿里妈妈广告技术2026届春招火热启动!

👉🏻 淘天集团2026届春季实习生招聘全球启动

🔥《计算机视觉 in 阿里妈妈》文章合集

懂你,更懂电商:阿里妈妈推出淘宝星辰视频生成大模型及图生视频应用

阿里妈妈技术开源 FLUX 图像修复及蒸馏加速模型

视频解说生成算法及在电商广告中的应用

NeurIPS'24 | FlowDCN:基于可变形卷积的任意分辨率图像生成模型

AtomoVideo:AIGC赋能下的电商视频动效生成

化繁为简,精工细作——阿里妈妈直播智能剪辑技术详解

百变背景:万相实验室AIGC电商图片可控生成技术

筑基砥柱:EcomXL-万相实验室AIGC电商基础模型

LLM在阿里妈妈智能文案的应用

上下文驱动的图上文案生成

关注「阿里妈妈技术」了解更多~

图片

喜欢要“分享”,好看要“点赞”哦ღ~

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值