论文笔记 | HyperNet: Towards Accurate Region Proposal Generation and Joint Object Detection

作者

Tao Kong Anbang Yao Yurong Chen Fuchun Sun

摘要

本文提出了一种HyperNet，同时用于处理region proposal和object detection。Hyper特征是将各层featuremaps的特征聚集然后统一到一个空间。在cpu上处理速度是5fps。

1 Introduction

首先说了Rcnn 到Faster rcnn的情况，指出Faster rcnn对于小物体很struggle的问题， 作者认为：
1. Feature for object proposal 和 detection的信息需要更加丰富
2. 用来precompute的层的resolution需要合理
越深的网络recall越好，但是定位能力却变差。
收到FCN的启发，将多层的特征结合用来定位。
HyperNet的能力：
1. 50个proposal 95% recall，100个proposal97% recall
2. on the detection challenges of voc2007, 2012outperforming the seminal fast Rcnn by6% and3%
3. 5fps

2 related work

Proposal：Deepbox；RPN；DeepProposal

3 HyperNet framework

3.1 Hyper Feature Production

multi-level maps ===max pooling or Deconv===uniform space===LRN===>>>Hyper Feature(single output cube)
优点：
1. 多层次特征
2. 合适的分辨率
3. 计算高效，无冗余

3.2 Region Proposal

在特征提取顶端设计一个深度的分类网络是非常有用的方法，据此本文设计了一个轻量级的region Proposal generater。
generater=ROI pooling+ 1conv layer+1Fully connect layer+2 output
每张图片产生3w张不同尺寸和长宽比的候选框，对于每一个候选框，两个输出中一个是计算框中有object的概率一个是box的offsets。之后使用NMS，0.7的阈值最终留下1k个region Proposals，最终使用k个，本文在训练的时候使用200个可是在测试时使用多个不同的数量来评估。

3.3 object Detection

典型的物体检测是使用FC-Dropout-FC-Dropout的pipeline，这里文中加了一道3x3x63的conv layer 不仅增加了表达能力，也减低了特征维数。之后就对候选框进行打分和bbx regression了

3.4 Joint Training

对于proposal
正例：>0.45
负例：<0.3