字节跳动发布最新AI视频模型Magic Animate(附教程)

e03d02373ce53e29b0f3c65ef0a8731c.jpeg

仅仅需要一张图片加上动作轨迹,就可以生成非常自然且丝滑的视频,无论是钢铁侠跳舞还是奥特曼跑步都可以轻轻松松的制作出来,并且没有闪烁衣服上面的褶皱,周围物体上的光线反应,可以说是做的非常完美。

fc810b5bf33bb664de1b79de0a9dc04e.jpeg9a2f1d9917dd116466a734bb6d7f3f71.jpeg

但是阿里并没有发布具体的操作流程和项目测试,这个项目很快就被字节跳动秒杀了。字节跳动提供了代码和具体的演示,不仅支持把静态的图片变成有动作的视频,而且还可以结合文本生成动画,还支持多人照片实现动作驱动,简直是太秀了。

de2ff904b58f0b3887278e5a96d71416.jpegeb3015900148c736baca0851cd44b42a.jpeg

并且发布了colab和hugging face的在线体验版本,无需本地部署就可以体验到最新的研究成果。

今天我们就一起来看看字节跳动发布的magic animate。

本文主要分为三个部分:

一、magic animate的一些简单介绍

二、magicanimate的操作演示

三、动作轨迹视频的制作方法

一.magic animate的一些简单介绍

字节跳动发布的magic anim magic anim是一个基于扩散模型的人类图像动画框架,意在强调时间一致性,忠实保留参考图像并提高动画的真实感,可以在推理的过程中产生平滑的视频。

6706d076745390ac6e5ef33177d91cc7.jpeg

除了基本的图像动画化,Magic anim还能应用于更多的场景,如将未见领域的图像,例如油画或电影角色动画化。或者结合文本描述生成动画。

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值