✨ 1: UniAnimate
阿里新发布的UniAnimate通过统一的视频扩散模型,实现高效人像动画生成,支持长视频生成
UniAnimate 是一种专注于一致性人像动画生成的统一视频扩散模型。该模型通过映射参考图像、姿势指导和噪声视频到一个共同特征空间,实现了高效且一致的长时视频生成。UniAnimate 的主要特点包括:
共同特征空间映射:利用统一的视频扩散模型,将参考图像、姿势指导和噪声视频映射到一个共同特征空间,减少了优化难度并确保了时间上的一致性。
统一噪声输入:支持随机噪声和基于第一帧的噪声输入,增强了长时间视频生成的能力。
高效的时间建模架构:使用基于状态空间模型的时间建模架构,替代原来计算消耗较大的时间 Transformer。
地址:https://github.com/ali-vilab/UniAnimate