轻量级3D姿态估计

本文介绍了能够在手机上运行的3D姿态估计网络MobileHumanPose,该网络基于TensorFlow平台,拥有3.92GFLOPS的算力和约5厘米的平均关节位置误差。网络采用编码器-解码器结构,利用修改过的MobileNetV2进行特征提取,并使用PReLU激活函数。开源项目包括onnx模型,人体检测部分采用了yolov5。模型的轻量化设计使其在效率和性能上超越同类模型。
摘要由CSDN通过智能技术生成

本文分享一款可以跑在手机上的3d姿态估计网络。

效果图:

算力3.92GFLOPS,而且平均每关节位置误差(MPJPE),也只有大约5厘米

用的TensorFlow平台开发,开源了onnx模型。

输入是目标检测后的人体图,人体检测用的yolov5。

网络结构:编码器-解码器

在编码器用于全局特征提取,而解码器进行姿态估计的基础架构,研究团队对其主干网络、激活函数,以及Skip concatenation功能都进行了修改。

他们在MobileNetV2的前四个倒置残差块(Residual Block)处修改了通道大小,获得了性能提升。

激活函数用的PReLU

MobileNetV2在一般场景中的性能都更好,且在少数场景中取得了最佳性能:

图片

在模型效率上,MobileNetV2的大模型效率为2.24M/3.92GFLOPS,远超同类模型的13.0M/10.7GFLOPS(Zerui Chen)。

论文:
htt

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

AI算法网奇

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值