CVPR2020 | Fusing wearable imus with multi-view images for human pose estimation: A geometric approach
作者: Zhe Zhang, Chunyu Wang, Wenhu Qin, Wenjun Zeng (东南大学&微软亚研院)
网址: https://github.com/CHUNYUWANG/imu-human-pose-pytorch
论文: https://www.microsoft.com/en-us/research/uploads/prod/2020/02/2003.11163.pdf
微软亚研院的工作,王春雨老师带的实习生做的,发在了CVPR2020上(实习生还是我们学校的,看着人家我只能流下了CVPR的口水,王老师水平还是很高的,我们组里的师兄也在他手下实习)。文章做的工作是利用多视角图像以及IMU信息获取3D人体姿态。和这篇文章关系紧密的文章主要有:Simple baselines,Cross view fusion,都是亚研院的工作。
文章主要有两个工作,一个是使用多视角图像配合IMU提供的关节方向信息进行特征融合,以此缓解遮挡情况带来的性能下降,进而得到准确的2D姿态估计结果,这篇文章融合多视角特征的思想不同于近几年有代表性的文章如learnable triangulation,cross view,这篇文章没有用基于对极几何的方法,而是采用基于IMU和肢体长度的方法来融合,非常独特;另一个