2019_CVPR_Dense 3D Face Decoding over 2500FPS: Joint Texture & Shape Convolutional

该博客介绍了3DMM统计模型在3D人脸重建中的应用,探讨了如何利用CNN进行非线性映射学习。文章重点提出了一种新的轻量级模型,通过网格卷积GCN实现2500FPS的CPU效率,进行无监督/自监督的3D形状和纹理联合学习。研究还对比了CoMA模型和PCA在表情表达上的优势,并引用了相关工作,如自我监督技术在超过250Hz频率下的单目重建。此外,讨论了数据集和网络架构,包括Image Encoder、Coloured Mesh Encoder和Decoder。
摘要由CSDN通过智能技术生成

(1)3DMM统计模型,形状和纹理PCA基,用来作为统计先验计算非线性的最小二乘优化来图像重建

(2)3DMM作为生成模型,利用CNN学习非线性映射(回归)

(3)本文,非线性联合学习形状和纹理(解码器不仅仅得到3d形状),网格卷积GCN,轻量级模型,2500fps cpu效率,无监督/自监督

网格卷积的优点:网络参数量少,模型大小17MB,估计3d形状300fps,Geometric Deep Learning

CoMA可以比PCA更好地表达表情,而且仅用8维度隐向量

 Related WORK

self-supervised techniques:

  1. Self-supervised multi-level face model learning for monocular reconstruction at over 250 hz. In CVPR, 2018.
    使用3DMM模型,和额外的网络结构学习3DMM空间之外的信息
  2. Nonlinear 3d face morphabl
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值