学习笔记18--SiamRPN

论文High Performance Visual Tracking with Siamese Region Proposal Network

本文主要提出Siamese region Proposal Network（Siamese-RPN），包含siamese子网络用于特征提取，以及候选区域生成网络(region proposal subnetwork)用于分类和回归。

一、先了解siamese网络--Fully-Convolutional Siamese Networks for Object Tracking

网络结构为上下两分支，共享卷积层参数（相同的特征提取网络φ，孪生网络含义）。模板分支z用来提取第一帧特征，检测分支x在当前帧上根据上一帧结果裁剪出search region。然后将模板z提取的特征图作为卷积核在x的特征上进行卷积操作，即图中的*部分，最终得到一个分数图score map，表示搜索区域各个位置与模板z之间的相似度，相应最大的点即为目标位置。

二、Siamese-RPN框架