3D人脸模型Flame ----《Learning a model of facial shape and expression from 4D scans》论文讲解及代码注释

已于 2022-04-14 10:03:11 修改
阅读量5.9k 收藏 19
点赞数 7
文章标签： 深度学习 人工智能
于 2022-03-29 10:37:22 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_16564093/article/details/123803735
版权
付费专栏 同时被 2 个专栏收录
12 篇文章 151 订阅 ¥19.90 ¥99.00
订阅专栏
人工智能专栏
1 篇文章 9 订阅
订阅专栏

前文

在阅读论文前，首先我们要有一定的知识储备，包括人脸建模，表情制作，旋转转换等，才能方便我们的论文理解，所以首先我会讲解一些关键的知识点。

  • Flame模型的作用?

Flame是一个3D人脸的通用模型，举个例子，你现在有一个特定人的3D人脸扫描序列，那么我便可以通过Flame模型拟合，构建个性化的模型，然后通过改变表情参数，动作参数，从而生成一些新的表情，动作的3D数据，以进行动画制作等。除此之外，因为扫描数据的误差和缺失，我可以通过Flame模型，对数据进行拟合平滑，得到较为完善，完美的3D数据。除此之外，我还可以使用通用的模板T，从而实现对人脸较为粗糙的3D重建。比如Deca中，通过深度学习与Flam

了解本专栏 订阅专栏 解锁全文
程序猿也可以很哲学
关注
  • 7
    点赞
  • 踩
  • 19
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 3
    评论
专栏目录
订阅专栏
TF_FLAME：用于FLAME 3D头部模型的Tensorflow框架。 该代码演示了如何从模型中采样3D头部，使模型适合2D或3D关键点，以及如何从Images生成带纹理的头部网格。
01-28
火焰：铰接式表现力3D头部模型（TF） 这是基于Tensorflow的官方存储库。 我们还提供 （一个基于的）和代码，以 。 FLAME是一种轻量级且表现力强的通用头部模型，可从33,000多次精确对齐的3D扫描中获悉。 FLAME将线性标识形状空间（受3800名受试者的头部扫描训练）与铰接的脖子，下颌和眼球，姿势相关的校正混合形状以及其他全局表达混合形状相结合。 有关详细信息，请参见 Learning a model of facial shape and expression from 4D scans Tianye Li*, Timo Bolkart*, Michael J. Black, Hao Li, and Javier Romero ACM Transactions on Graphics (Proc. SIGGRAPH Asia) 2017 和。 内容 该存储库演示了如何 采样3D面网格 使3D模型适合2D地标 使3D模型适合3D地标 使3D模型适合已注册的3D网格 采样纹理空间 如何为语音驱动的面部动画（ ）生成模板 设定 该代码已使用Tensorflow 1
FLAME_PyTorch：这是PyTorch中3D FLAME模型的实现
02-01
火焰：铰接的表现力3D头部模型（PyTorch） 这是PyTorch中 3D头部模型的实现。 我们还提供 （一个基于的）和。 FLAME是一种轻量级且表现力强的通用头部模型，可从33,000多次精确对齐的3D扫描中获悉。 FLAME将线性标识形状空间（受3800名受试者的头部扫描训练）与铰接的脖子，下颌和眼球，姿势相关的校正混合形状以及其他全局表达混合形状相结合。 有关详细信息，请参见 Learning a model of facial shape and expression from 4D scans Tianye Li*, Timo Bolkart*, Michael J. Black, Hao Li, and Javier Romero ACM Transactions on Graphics (Proc. SIGGRAPH Asia) 2017 和。 安装 该代码使用Python 3.7 ，并已在PyTorch 1.4上进行了测试。 设置FLAME PyTorch虚拟环境 python3.7 -m venv <your>/.virtualenvs/F
[SIGGRAPH2017](FLAME)Learning a model of facial shape and expression from 4D scans
wrk226的博客
01-24 2293
动机 现在的3D模型有俩极端： 1.人工的3D模型，非常精细，但是需要大量人力 2.通用的3D模型，可以很容易匹配图像和视频，但是比较粗糙 所以这个文章就是为了同时满足上述两方面的需求 数据 早期的generic face model由于数据不足，所以能表达的面部形状有限。因此这篇文章就融合了三个数据库来弥补数据不足的问题。并且这文章的FLAME中的人物身份，姿势，面部表情都是分别单独表示的。 用CAESAR数据库来学习身份形状的表示 用D3DFACS数据库来学习姿势和表情的表示 用FaceWarehous
Learning a model of facial shape and expression from 4D scans
redredblue的博客
04-11 1706
Fig. 1. FLAME example. Top: Samples of the D3DFACS dataset. Middle: Model-only registration. Bottom: Expression transfer to Beeler et al. [2011] subject using model only 3D人脸建模领域在高端和低端方法之间存在很大差距。 在高端...
【计算机视觉|人脸建模】学习从4D扫描中获取的面部形状和表情的模型
远
10-05 1581
本系列博文为深度学习/计算机视觉论文笔记，转载请注明出处图1.。顶部：D3DFACS数据集的样本。中部：仅模型注册。底部：仅使用模型进行表情转移到Beeler等人[2011]的主题。3D面部建模领域存在着高端和低端方法之间的巨大差距。在高端，最佳的面部动画与真实人类无法区分，但这需要大量手工劳动。在低端，来自消费者深度传感器的面部捕捉依赖于不足以捕捉自然面部形状和表情变化的3D面部模型。我们寻求通过从数千个准确对齐的3D扫描中学习面部模型来找到一个中间地带。
FLAME人脸模型+blender
ayouayouwei
05-25 2811
FLAME介绍 懒得介绍，自己看官方网站和论文把 官网 论文 FLAME blender 插件 Flame 官网提供了blender插件，可以快速新建一个FLAME人脸模型并进行编辑。 使用步骤 下载。地址在官网：进入download，在Models下选择FLAME Blender Add-on(FLAME 2020) 安装Blender FLAME Blender AddOn中的Readme很详细，直接参考那个就行 FLAME 代码驱动变化 驱动表情、形状、姿势 D = bpy.data key_b
flame-fitting:FLAME 3D头部模型的示例代码。 该代码演示了如何从模型中采样3D头，如何使模型适合3D关键点和3D扫描
05-22
Learning a model of facial shape and expression from 4D scans Tianye Li*, Timo Bolkart*, Michael J. Black, Hao Li, and Javier Romero ACM Transactions on Graphics (Proc. SIGGRAPH Asia) 2017 和。 该...
Facial-expression_Reg源数据.zip
09-06
标题中的"Facial-expression_Reg源数据.zip"表明这是一个与面部表情识别相关的数据集，而"Facial-expression_Reg数据源"的描述进一步确认了这一点。这个数据集可能包含了用于训练和测试深度学习模型的图像或者特征...
facial-expression-recognition:使用CNN的FER
05-09
面部表情识别 使用卷积神经网络的面部表情识别。 概述 要求 Python3.5 OpenCV 凯拉斯 张量流gpu 学习 ...复制“ Gudi_model_100_epochs_20000_faces.data-00000-of-00001”并将其重命名为“ Gudi_mod
Scalable 3D Facial Shape Motion Retrieval from Image Sequences Using a Map-Reduce Framework
02-11
### Scalable 3D Facial Shape Motion Retrieval：关键技术与实现 #### 摘要与引言 本文介绍了一种从图像序列中检索三维面部形状运动的可扩展方法，并提出了一种基于Map-Reduce框架的解决方案。随着智能眼镜等可...
FLAME-Blender-Add-on：用于FLAME面部模型的Blender附加组件
01-30
FLAME-Blender-Add-on：用于FLAME面部模型的Blender附加组件
TF_FLAME_人脸建模_FLAME人头模型_3D人脸模型库_3dMM_
10-03
3D人脸模型建模工具，用于人脸建模，3DMM系数匹配
Flame
10-28
Flame
FLAME
10-24
FLAME
matlab人脸匹配代码-Facial-Recognition-with-Machine-Learning:机器学习的面部识别
05-23
matlab人脸匹配代码机器学习的面部识别 编辑者：RAHUL RANJAN，Avi Nehemiah，MATHWORKS和MATLAB Applications 作者：Timothy F.（CSC 6630 / tfisher10），Kevin S.（CSC 4630 / kseveur1），Micheal M. （CSC 4630...
FLAME模型运行原理
最新发布
子燕若水的博客
10-14 1542
FLAME模型利用了线性蒙皮技术(linear blend skinning)来使面部网格随着姿态变形。
Flame解读
weixin_34234721的博客
05-31 369
NetworkWorld近日发文对Flame（火焰），这个号称比震网和毒酷更强大的恶意软件进行了解读。 原文参见这里，通俗易懂。 【参考】 Anonymous几天之内攻陷500多个中国网站 TrendMicro：针对印日的LuckyCat*** symantec：硝基***针对化工厂商 针对前独联体国家以及印度、中国的APT***案例 Stuxnet2.0现身欧洲 APT***...
flame论文笔记
redredblue的博客
04-12 5279
目前为止通用的人脸模型有3DMM模型和FaceWarehouse模型，但因为能用的数据集太少限制了能表达的面部形状。 FLAME利用三个异构数据集，总共使用了33,000多个3D扫描。 从大约4000个CAESAR身体扫描的头部训练---身份形状空间（identity shape space）。 使用D3DFACS数据集的400多个4D面部序列和flame自己捕获的4D序列---模...
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

程序猿也可以很哲学

让我尝下打赏的味道吧

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值