人人可拥有? 一部手机即可生成真实的数字化身 #Meta 离元宇宙更近了吗?

哇塞!能问下这个虚拟人是用啥软件做出来的? unreal 的metahuman 吗?还是 ready player me?还是其它酷炫的软件?

#

#

#

用 ready player me 做的,在他基础上修改。

人物的肢体动作是用的 mix,还是直接在 unity 里调整骨骼呢?

#

#

不用调整骨骼,直接代码驱动就行,ready 的骨骼已经绑定好了~

酷!所以动作还没用到动捕技术是吧 是代码预设的一些默认动作玩法?

#

#

上面展示的案例没有用动捕装备。不过说不定以后复杂的动捕设备会逐渐淘汰……

Authentic Volumetric Avatars From a Phone Scan 

SIGGRAPH 2022

64867a57a8132b4fa3ca4a316a03af35.png

8b503daf69fdcd6efb6e3e5a42222c88.png

Meta 发布了关于真人数字头像的最新研究,展示了只用一部 iPhone 完成扫描逼真的虚拟现实 VR 化身的制作流程。这项任务曾经需要 100 多个摄像头才能完成,此技术大大降低了真人虚拟数字人化身的制作成本。

169f205ea61878fe37433023bb2cf949.png

小杜

Meta 之前使用包含 171 个高分辨率摄像机来制作专业的 VR 化身,新技术能使用带有前置深度传感器的智能手机,用手持扫描替代复杂的设备系统。

4799a51ce9ac0de5b2aa075011b01caa.png

Mate 使用的包含171个高分辨率设计相机的 Avatar 制作系统 MUGSY 

c8219e4747bcb59e840eea145c1be537.png

iPhone 扫描生成 Avatar

534696aaf0c48fe7523bd306a3d6842b.gif

5b8d8c4ec3ba5598899b3d99114a9da2.png

小杜

该技术支持制作拥有丰富表情的单人虚拟化身,同时也支持单个动作驱动视屏控制输出多人虚拟化身。

3c306b26b03e41751fdbb1098f2a7b1b.png

1d72b98baa93b76bdcecf7e4d52ca9a3.png

8242347c60543af196148338ec26875d.png

输入动作驱动视频,输出多人虚拟化身

e0564c8abb88d5a252da3b54d5697cd3.png

小杜

此项目还对比了多机位合成的数字形象与单摄像头合成的效果。多机位合成效果较单相机扫描更为细腻,光感柔和。

c26b087324ac3f685a9a9dbe620d59f1.png

多机位合成的数字形象 vs 单摄像头合成

94cf43cd2fd5af11d6bb6e9660f88acb.png

小杜

但该技术还未成熟到商业应用。目前使用者必须将手机平移到中性面部,然后再复制一系列 65 种面部表情。扫描过程平均需要三分半钟,但用户必须等待六个小时才能让一台配备四个高端 GPU 的机器完整地渲染头像。如果这个产品向公众开放,渲染大概率会在云 GPU 上完成。

项目论文地址:

drive.google.com/file/d/1i4NJKAggS82wqMamCJ1OHRGgViuyoY6R/view

0cfab7e6072d737fb904198d3705a374.gif

Mixlab

期待该技术完善后的应用前景,一部手机即可迁入元宇宙~

b594a348083dee040e5da5ae87708738.png

opus

欢迎加入社群,探索 数字人 的多样玩法~

b8fdf1fd5dd896b3942f0e86939468b6.png

备注:数字人

[ 元宇宙创作者指南 ] 

[ 元宇宙资源清单 ]

github.com/shadowcz007/awesome-metaverse

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值