【换脸AI升级版】面部表情、身体动作、视线方向都能实时迁移

来自德国慕尼黑工业大学、斯坦福大学等的一组研究人员最近开发了一个AI，它可以将你的实时的面部表情、眼球运动和姿势转换成肖像，使得图像中的人看起来像是真的在说话和移动。这种技术创造的肖像非常逼真，甚至逼真得令人不安。

这个AI被称为HeadOn，创造它的人正是去年研发了令人瞠目结舌、引发很大争议的“变脸AI”Face2Face的团队。事实上，HeadOn可以说是Face2Face系统的升级版。

HeadOn的视频演示：

研究人员在论文里将这个系统称为“首个人体肖像视频的实时的源到目标（source-to-target）重演方法，实现了躯干运动、头部运动、面部表情和视线注视的迁移”。

根据研究人员的说法，没有其他系统能做到这样。它结合了多种技术——其中大部分是由这个研究团队首创或完善的。

为了解决视线注视的问题，该团队之前开发了FaceVR：

研究团队去年在Face2Face上所做的工作为HeadOn的大部分能力提供了框架，但Face2Face只能实现面部表情的转换，HeadOn增加了身体运动和头部运动的迁移。

在论文中，作者进一步介绍了HeadOn，这是一个用普通RGB-D相机录制的人像视频的重演（reenactment）系统。该系统通过不仅控制面部表情的变化