时空动作检测Actions As Moving Points--MOC detector

1.概念
时空动作检测有两个目标,一个是识别视频中所有的动作实例,另一个是在时间以及空间上定位动作。

2.相关方法
之前的方法有基于frame-level,也就是基于每一帧先进行检测,然后通过一定的方法将基于每一帧的检测结果在时间上进行融合,但是这种方法将时间与空间的信息割裂开来处理,最终效果并不好。
基于clip-level的方法将一个视频片段作为输入,通过检测器检测出人物框,然后再通过3D网络等进行特征提取进而进行识别,这种方法要分为两个阶段进行,检测器在空间上给出动作实例的框,然后再进行动作识别的处理,这种方法对检测器的性能要求很高,并且计算量大,不利于应用。
针对以上的问题,MOC-detector基于centernet无锚框的架构设计了单阶段的检测器,这使得训练更加容易同时效果也更好。

3.MOC-detector简介
MOC-detector采用全卷积的one-stage框架,将动作实例看作一系列移动的点,并在每一帧中点的位置回归出人的位置框,如下图

在这里插入图片描述

MOC-detector将任务分解为三个子任务
1.中心检测 :检测动作实例的中心以及类别
2.偏移估计:估计当前帧动作实例对于中心的偏移
3.框回归:再每一帧的中心预测框大小
首先,通过2D网络对每一帧进行特征提取,其次三个分支依据特征产生结果。

1.Center Branch

  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 7
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 7
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值