合成效果超越前SOTA
之前要两天才能训练好的数字人,现在只用半小时就能完成了!
到了推理阶段,更是只要16毫秒,就能得到动作流畅、细节到位的场景视频。
而且无需复杂的采样和建模,只要随便拍一段50-100帧的视频就足够了,换算成时间不过几秒钟。
这正是由苹果联合德国马普所推出的,基于高斯函数的3D数字人合成工具HUGS。
它可以从一段简单的视频当中提取出人物骨骼,从而合成数字分身并驱动它做出任意动作。
这个数字人可以丝滑地融合到其他场景,甚至帧率还能超越原始素材,达到60FPS。
Hugging Face的“首席羊驼官”Omar Sanseviero看到后,也给HUGS送上了hug。
那么,HUGS可以实现怎样的效果呢?</