▐ 淘宝星辰 · 懂你,更懂电商
【淘宝星辰】 是由阿里妈妈基于自研的淘宝星辰视频生成大模型推出的视频AIGC工具。近日,淘宝星辰视频生成大模型重磅升级 2.0,同步升级并上线【淘宝星辰 · 图生视频 2.0】!
通过对数据飞轮、3D VAE、淘宝星辰视频生成大模型等核心模块的全面升级,【淘宝星辰·图生视频 2.0】在AIGC的“真、像、美”核心三维度显著提升,抽卡成功率和过审率均达到了规模化的要求。
✅ 更真:语义遵循能力、生成画面真实度显著提升,让AI视频更接近真实世界。
✅ 更像:人脸、商品、场景等细节内容的保持能力显著提升,时间虽然流逝,但“人货场”始终一致。
✅ 更美:无论是人体肤感、还是画面质感、亦或是环境光感,从多维度提升视频美感。
✅ 规模化应用:抽卡成功率和过审率显著提升,逐渐实现ToB、ToC的多款工具接入、业务场景规模化供给和覆盖,解决短视频智能创作的视觉素材供给难题。
👉🏻 体验地址:https://agi.taobao.com/
// 目前仅对淘宝天猫商家开放,普通用户请耐心等待~
▐ 淘宝星辰视频生成大模型 2.0
2025年1月,阿里妈妈正式发布了淘宝星辰视频生成大模型以及【淘宝星辰 · 图生视频】,实现了更懂电商的视频生成效果。(👉🏻详情参见:懂你,更懂电商:阿里妈妈推出淘宝星辰视频生成大模型及图生视频应用)
在过去的两个月里,经过多团队的密切协作,我们在数据飞轮、3D VAE、淘宝星辰文生视频、淘宝星辰图生视频等多个核心模块进行全面优化,正式升级为【淘宝星辰视频生成大模型 2.0】,同步发布工具【淘宝星辰·图生视频 2.0】:
人工评测:通过对真、像、美等核心效果维度进行人工盲评,淘宝星辰2.0 vs 淘宝星辰1.0 胜出率高达78.5%,在视频生成上更真、更像、更美!
成功率与过审率:无用户指令的情况下,一次抽卡成功率和视频过审率显著提升,视频生成能力已经达到规模化的要求!

▐ 更真、更像、更美的图生视频 2.0
✅ 工具升级:保持工具简洁的操作的同时,提供淘宝星辰2.0与1.0版本选择、标清与高清的模式切换,更有通过多选结果进行一键成片的短视频生成!

淘宝星辰1.0 | 淘宝星辰2.0 |
![]() |
prompt:两半饼被拉开,中间的拉丝不断开
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() |
prompt:画面中的人双手捧起一只白色大公鸡,抱在胸前
淘宝星辰1.0 | 淘宝星辰2.0 |
prompt:茶汤倒入茶碗中,茶水冒出热气,茶碗装满茶水之后停止倒水
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() | ![]() |
prompt:镜头保持静止,男子对着镜头摆出健美造型,肌肉感明显,看上去非常强壮
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() | ![]() |
prompt:镜头保持静止,男子和女子微笑着看着对方,突然抱在一起大哭起来
✅ 更像:人脸、商品、场景等细节内容的保持能力显著提升,时间虽然流逝,但“人货场”始终一致。
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() | ![]() |
prompt:模特走向镜头,展示衣服
淘宝星辰1.0 | 淘宝星辰2.0 |
prompt:模特对着镜头展示裤子
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() | ![]() |
prompt:一位美丽的亚洲年轻女士穿着一件长袖淡棕色毛衣、深色紧身牛仔裤和黑色高跟鞋,优雅地展示她的穿搭。她的发型是直发,披肩而下,颜色是粉红色
✅ 更美:无论是人体肤感、还是画面质感、亦或是环境光感,从多维度提升视频美感。
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() | ![]() |
prompt:光影变化扫过模特的脸颊,模特对着镜头微笑了一下
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() | ![]() |
prompt:微风吹过模特的头发,发丝随风飘动
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() | ![]() |
prompt:随着模特的手部动作,脸上磨搓起泡
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() | ![]() |
prompt:画面中的人坐上一朵云彩,一飞冲天,直到消失
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() | ![]() |
prompt:一个人给女生一束郁金香,女生把花举在胸前,露出面部,面带微笑
淘宝星辰1.0 | 淘宝星辰2.0 |
![]() |
prompt:模特慢慢地举起一只手放在脸上,手指轻轻擦过眼镜
✅ 规模化应用:抽卡成功率和过审率显著提升,逐渐实现ToB、ToC的多款工具接入、业务场景规模化供给和覆盖,解决短视频智能创作的视觉素材供给难题。
目前【淘宝星辰 · 图生视频 2.0】除了上文中已上线的万相营造工具入口,同时已经在阿里妈妈广告主工具平台(ToB)、AI试衣产品Lookie(ToC)中上线应用。
另外,【淘宝星辰 · 图生视频 2.0】已经开始应用于阿里妈妈广告业务批量化生产信息流V视频创意、供给短视频生产所需的基础视觉片段、支持淘宝天猫多个行业的视频内容需求等规模化场景。期待与感兴趣的业务&应用方共同探索更多精彩应用场景!
1. 信息流广告V视频创意投放示例
广告1:半高领打底衫 | 广告2:打底裤 |
2. 万相营造工具入口
3. 广告主工具平台(BP)入口

4. Lookie淘宝体验入口
第一步:淘宝搜索 lookie | 第二步:进入“全面整活创意视频” | 第三步:选择玩法,开始生成 |
▐ 关于我们
我们是阿里妈妈智能创作与AI应用,专注于智能创意创作与投放、AIGC、LLM应用等方向,欢迎各业务方关注与业务合作。同时,真诚欢迎具备CV、NLP和推荐系统相关背景同学加入!
📮 简历投递邮箱:
alimama_tech@service.alibaba.com
END
也许你还想看
丨懂你,更懂电商:阿里妈妈推出淘宝星辰视频生成大模型及图生视频应用
丨NeurIPS'24 | FlowDCN:基于可变形卷积的任意分辨率图像生成模型
关注「阿里妈妈技术」,了解更多~
喜欢要“分享”,好看要“点赞”哦ღ~