【AIGC】Animate Anyone阿里全民舞王背后的科技，基于图片高可控动画生成

在11月底，阿里巴巴集团智能计算研究院发布了一款AI动画项目：Animate Anyone。只需要一张人物静态图片，结合人物的骨骼动画（姿势控制），就能生成一段人物动画视频。

我们先通过官网放出的动画效果直观感受一下。

一. Animate Anyone简介

Animate Anyone: Consistent and Controllable Image-to-Video Synthesis for Character Animation，翻译中文就是"角色动画的一致且可控的图像到视频合成"。

角色动画旨在通过驱动信号从静止图像生成角色视频。目前，扩散模型因其强大的生成能力已成为视觉生成研究的主流。然而，图像到视频领域仍然存在挑战，特别是在角色动画中，暂时保持与角色详细信息的一致性仍然是一个艰巨的问题。

利用扩散模型的力量，团队提出了一个为角色动画量身定制的新颖框架。为了保持参考图像中复杂外观特征的一致性，设计了 ReferenceNet 通过空间注意力来合并细节特征。为了确保可控性和连续性，引入了有效的姿势引导器来指导角色的运动，并采用有效的时间建模方法来确保视频帧之间平滑的帧间过渡。

通过扩展训练数据࿰