论文解读 | Fusing wearable imus with multi-view images for human pose estimation: A geometric approach

CVPR2020 | Fusing wearable imus with multi-view images for human pose estimation: A geometric approach

作者： Zhe Zhang, Chunyu Wang, Wenhu Qin, Wenjun Zeng （东南大学&微软亚研院）
网址： https://github.com/CHUNYUWANG/imu-human-pose-pytorch
论文： https://www.microsoft.com/en-us/research/uploads/prod/2020/02/2003.11163.pdf

  微软亚研院的工作，王春雨老师带的实习生做的，发在了CVPR2020上（实习生还是我们学校的，看着人家我只能流下了CVPR的口水，王老师水平还是很高的，我们组里的师兄也在他手下实习）。文章做的工作是利用多视角图像以及IMU信息获取3D人体姿态。和这篇文章关系紧密的文章主要有：Simple baselines，Cross view fusion，都是亚研院的工作。

  文章主要有两个工作，一个是使用多视角图像配合IMU提供的关节方向信息进行特征融合，以此缓解遮挡情况带来的性能下降，进而得到准确的2D姿态估计结果，这篇文章融合多视角特征的思想不同于近几年有代表性的文章如learnable triangulation，cross view，这篇文章没有用基于对极几何的方法，而是采用基于IMU和肢体长度的方法来融合，非常独特；另一个