实例分割

性能

模型性能评价
solov2ResNet-101 and deformable convolutions achieves 41.7% in AP on COCO test-dev (without multi-scale testing). A light-weight version of SOLOv2 executes at 31.3 FPS on a single V100 GPU and yields 37.1% AP.在Res101和可形变卷积上精度为41.7%,实际使用效果应该会大幅缩水。

SOLD:

主要思想:

利用位置信息来进行实例分割,将原图大致分为S*S个矩形框,分别对每个框进行分类和分割预测。流程如图:在这里插入图片描述
输出共有两个分支,上面分支预测类别信息,输出尺寸为S * S * C:S为原图预设的分割矩形框数目;C为类别个数。下面分支预测实例mask,输出为H * W * S2 ,通道数S2对应原图所分的每个块,预测为该块对应的完整实例mask。

关键点:

  1. CoorConv:为不同通道输出的特征图引入空间位置信息。
  2. Local Loss 和 Dice Loss
  3. nms的矩阵实现:Matric NMS

solov2

主要优化的部分为mask生成分支

在这里插入图片描述
图a为原始的solo网络maks分支,直接生成H * W * S2的预测特征图;图b为一种x和y方向上的解耦操作,作者发现x和y方向上的预测是相对独立的图c为位置相关的一种解耦操作,上面分支预测S * S个anchor参数,每个anchor对下面分支进行卷积操作都会生成一张特征图,共可生成S2个,接下来就与图a一致了。

PSPNet

在这里插入图片描述
c部分:pooling为平均池化,池化后利用11卷积将通道数降低为原来的1/N(N为pooling的个数,此处为4),然后上采样到原Feature大小,Concat后此部分结束
d部分:利用卷机生成N
HWC的特征图用于预测。N为batch、H和W为b部分预测的特征图尺度、C不确定,猜测为类别个数,待确定

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值