CornerNet: Detecting Objects as Paired Keypoints 阅读笔记

介绍

  • anchor-based的方法需要大量anchor boxes来确保anchor boxes与GT box有足够的重叠,从而减慢了训练速度。
  • anchor box的使用引入了许多超参数,包括box的尺寸和高宽比。
  • CornerNet: 使用一个单一的卷积神经网络,将物体的边界框检测为一对关键点,即左上角和右下角。通过将物体检测为成对的关键点,消除了设计一组bounding boxes的需要。

方法

在这里插入图片描述
CornerNet: 将一个物体检测为一对关键点–bounding box的左上角和右下角。使用一个单一的卷积网络来预测同一物体类别的所有实例的左上角的热图,所有右下角的热图,以及每个检测到的角的嵌入向量。嵌入的作用是将属于同一物体的一对角分组–网络被训练来预测它们的类似嵌入。
在这里插入图片描述
在这里插入图片描述
corner pooling layer: 接收两个特征图;在每个像素位置,它从第一个特征图向右最大集合所有特征向量,从第二个特征图直接向下最大集合所有特征向量,然后将两个集合的结果加在一起。

模型

在这里插入图片描述
图4:使用Hourglass作为backbone,之后是两个预测模块,在预测热图、嵌入和偏移之前,从Hourglass中汇集特征。与其他许多物体检测器不同,不使用不同尺度的特征来检测不同尺寸的物体,只对沙漏网络的输出应用这两个模块。
在这里插入图片描述
在这里插入图片描述
公式1:focal loss
在这里插入图片描述
公式2:预测的位置偏移
在这里插入图片描述
公式3:训练损失
在这里插入图片描述
公式4:对corners进行分组
公式5:分离corners
在这里插入图片描述
在这里插入图片描述
预测模块:第一部分是残差块,之后用一个corner pooling模块取代了第一个三维卷积模块。
在这里插入图片描述
使用Adam来优化总损失。

实验

在这里插入图片描述

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

1100dp

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值