End-to-end Recovery of Human Shape and Pose论文阅读笔记

End-to-end Recovery of Human Shape and Pose

论文的中文翻译下载
文章主要干了什么：
此文章提出了一个以端到端的方法实现从二维人体图像恢复出三维人体模型的框架。在此之前，绝大多数的方法或是只关心三维骨架的重建，或是采用两段式的方法，即先从二维图像推断出2D-joint location，再从2D-joint来预测三维模型或计算三维参数。
两阶段法：
1、用2D pose检测，预测2D关节位置
2、通过回归分析和model fitting从2D关节去预测3D关节，其公共方法是利用一个学习的3D骨架库。
这些方法为了约束2D-to-3D的固有歧义，用了不同的先验：
1、假定四肢长度，或比例
2、学习一个姿势先验，获得了与姿势独立的关节角度限制。
特点：对于域的转变更鲁棒，过度依赖2D关节点侦测，丢掉了图片的信息。
在实现端到端的从二维人体图像恢复出三维人体模型框架中遇到的难题
1、缺少足够数量的带有ground truth 3D annotation的自然获取的实况图像，目前已有的自带3D结构注解的图像都是在特定的实验环境下获得的，并不足以反映真实世界可能出现的所有情况。
2、从二维到三维存在着固有的模棱两可性，因为缺少了深度信息，许多不同的三维模型都可以映射为同一个二维图像，而由二维图像映射到三维时&#