#今日论文推荐# CVPR 2022 Oral | 创建一个属于你的高保真数字人，一段单目自转视频就够了

#今日论文推荐# CVPR 2022 Oral | 创建一个属于你的高保真数字人，一段单目自转视频就够了

来自中科大的张举勇教授课题组联合杭州像衍科技有限公司与浙江大学，于近期一同提出一种基于单目 RGB 视频的高保真三维人体重建算法SelfRecon，该算法仅需输入目标对象一段十几秒的自转视频，即可恢复重建对象的高保真数字化身。
近年来，随着图形技术的快速发展，各类虚拟数字人开始走入我们的日常，如数字航天员小诤、百度智能云 AI 手语主播、腾讯 3D 手语数智人 “聆语” 等纷纷亮相。实际上，三维数字人技术于我们的日常生活早有应用，如早在 2015 年上映的电影《速度与激情 7》中，就曾使用三维数字人技术帮助复活已故演员保罗沃克。
在去年的 GTC 大会上，英伟达更是基于高保真虚拟数字人技术举办了一场以假乱真的产品发布会，一时引发广泛关社会关注与讨论。同样地, 英伟达的数字人生成与建模同样也需要高昂的人力成本和高端的硬件支持。据悉，英伟达为保证报告视频中的老黄足够真实，期间调配了 34 个 3D 美术师、15 个软件研究人员，实现了 21 个不同版本的假老黄，最终展示给我们的则是从中选择的最为理想的一个。在该版本中，英伟达可以说整合了各种建模、编辑、驱动以及渲染技术，更是借助工业级高规格采集设备来保证重建的三维人体的几何材质精度，在耗时良久的情况下才达到如下所示的难辨真假的视觉效果。
然而，如此高昂的人力成本与时间成本、以及技术上的复杂性和专业性要求不可避免地导致相关方法难以推广至一般消费市场。另一方面，随着移动端手机设备的普及，单目 RGB 数据开始变得唾手可得，因此若仅仅依靠单目 RGB 视频数据就能高效便捷地获取普通对象的高质量可驱动数字化身，将切实地推动虚拟数字人及其相关技术应用与发展，而这也是三维视觉以及图形学领域一直致力于的研究目标。
为此，中科大张举勇教授课题组联合杭州像衍科技有限公司与浙江大学，于近期一同提出一种基于单目 RGB 视频的高保真三维人体重建算法SelfRecon，该算法仅需输入目标对象一段十几秒的自转视频，即可恢复重建对象的高保真数字化身。该研究工作已被 CVPR 2022 接收，并将于 CVPR 会议期间进行口头报告。

论文题目：SelfRecon: Self Reconstruction Your Digital Avatar from Monocular Video
详细解读：https://www.aminer.cn/research_report/62a6e4dd7cb68b460fd173fa?download=falsehttps://www.aminer.cn/research_report/62a6e4dd7cb68b460fd173fa?download=false
AMiner链接：https://www.aminer.cn/?f=cs