[论文解读]CVPR2019 | FSAF:Feature Selective Anchor-Free Module for Single-Shot Object Detection 自动选择特征层

本文介绍了FSAF:一种用于单镜头对象检测的特征选择无锚模块,旨在解决传统锚点方法的局限。作者提出在线选择特征层的方法,尤其针对FPN的多层特征,并在训练中同时采用锚点和无锚点分支。实验显示,该方法在COCO上取得了44.6%的MAP,证明了其有效性和必要性。
摘要由CSDN通过智能技术生成

论文名称:Feature Selective Anchor-Free Module for Single-Shot Object Detection
作者:Chenchen、Zhu Yihui He、 Marios Savvides from Carnegie Mellon University

Motivation:

作者认为传统的anchor-based检测方法有2个缺点:
1、引导式的特征选择 ;
2、重叠的anchor采样;(没大懂)
The FSAF module addresses two limitations brought up by the conventional anchor-based detection:

  1. heuristic-guided feature selection;
  2. overlap-based anchor sampling.

因此,作者提出anchor-free的在线式的选择特征层的方法,尤其是对FPN的多个特征层选择,并且在这个训练的同时也可以采用anchor-based的方法并行训练。
实验表明:在COCO上达到了44.6%的MAP的好成绩。

Introduction
One challenging problem for object detection is scale variation.
作者认为最大的问题是目标检测在尺度变化上的问题。如果采用公式: l ′ = l 0 + l o g 2 ( w h / 224 ) l' = l_0 + log_2(\sqrt{wh}/224) l=l0+log2(wh /224)来分层决定尺度的话,不能保证为GT指派最合适的feature map。如40X40与50X50的车被化分到同一特征层上。
于是作者提出的FSAF模型用于解决上述问题。该模型主要是让实例选择最合适的特征层次进而来优化网络,因此,在该模型中不应该存在anchor限制特征的选择。
在这里插入图片描述Related Work
aspects:

  1. how to create the anchor-free branches in the network;
  2. how to generate supervision signals for anchor-free branches;
  3. how to dynamically select feature level for each instance;
  4. how to jointly train and test anchor-free and anchor-based branches).

architecture
FPN 有7层,文中只画了3层。在 RetinaNet 的 box 和 cls 分支上仅仅各加了一层 conv layer,分别生成一个 W × H × K classification output 和一个 W × H × 4 的 regression output
不多说直接上图:
在这里插入图片描述
ground-truth & loss
在这里插入图片描述
class:
每一个 pixel 预测这个位置是什么类别,共K个类别,在第k个类别上的instance在feature map 上的映射的 0.2 倍 box 内为 positive,在 0.5 倍 box 内进行忽略,不进行反向传播;其他都设为0。以此,进行回归。
location:
直接回归中心附近点( 0.2 倍大小范围内)到边框的距离。
而 regression output 只针对于 0.2 倍的 instance box 进行训练,回归像素点(i,j)离边界的距离。
直接上公式:
网络出来的预测值乘上比例系数(文中为4.0):
[ p t i , j , p l i , j , p b i , j , p r i , j ] → S ∗ [ p t i , j , p l i , j , p b i , j , p r i , j ] [p_{t}^{i,j}, p_{l}^{i,j},p_{b}^{i,j},p_{r}^{i,j}] \to S*[p_{t}^{i,j}, p_{l}^{i,j},p_{b}^{i,j},p_{r}^{i,j}] [

  • 0
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值