MegActor 是由 MEGVII Technology(旷视科技)研发的一项人像动画生成器,它使用原始视频作为驱动因素来生成逼真生动的说话头部视频。具体来说,研究团队利用了两个 unet:一个从源图像中提取身份和背景特征,另一个精确地生成和整合直接从原始视频中提取的运动特征。MegActor 可以在低质量、公开可用的数据集上进行训练,并且在面部表情、姿势多样性、微妙的可控性和视觉质量方面表现出色。

使用云平台:OpenBayes

 登录到 OpenBayes 平台后,打开「公共教程」,找到「MegActor 人像动画生成器 Demo」的教程。

开源 AI 人像视频合成框架!MegActor 一键启动教程_开源模型

进入教程后,点击右上角「克隆」。

开源 AI 人像视频合成框架!MegActor 一键启动教程_数字人_02

平台在克隆过程中会自动为容器绑定所需要的数据,不需要我们再手动配置,直接点击「下一步:选择算力」。

开源 AI 人像视频合成框架!MegActor 一键启动教程_数字人_03

平台会自动为模型选配好合适的算力资源和镜像版本,这里使用的是英伟达 RTX 4090 的算力和 PyTorch 的镜像,别忘了使用文章开头的邀请链接,可以 get 免费时长!选择好后,点击「下一步:审核」即可。

开源 AI 人像视频合成框架!MegActor 一键启动教程_AI人像视频_04

确认无误后,点击「继续执行」。

开源 AI 人像视频合成框架!MegActor 一键启动教程_AI_05

系统分配资源完成后,待状态显示为「运行中」后,由于该项目需要额外的环境配置,在容器启动完成后项目会自动下载所需依赖,等待 5 至 6 分钟即可通过 API 地址进入该项目操作页面。使用 API 需要进行现进行实名认证哦~

 

开源 AI 人像视频合成框架!MegActor 一键启动教程_数字人_06

开源 AI 人像视频合成框架!MegActor 一键启动教程_AI人像视频_07

在左侧 Source Image 处上传一张照片,Driver video 处上传参考视频,点击 Animate,即可生成人像动画。

开源 AI 人像视频合成框架!MegActor 一键启动教程_AI_08

 

开源 AI 人像视频合成框架!MegActor 一键启动教程_AI人像视频_09