显著性目标检测——Selectivity or Invariance: Boundary-aware Salient Object Detection(BANet)

摘要

通常,显著物体检测模型(SOD)在处理物体内部和边界时面临相反的要求。内部特征应不随强烈的外观变化而变化,以便从整体上弹出突出的对象,而边界的特征应对轻微的外观变化具有选择性,以区分突出的对象和背景。为了解决这种选择性不变性难题,提出一种基于图像的SOD具有连续扩张的边界感知网络。在这个网络中,通过结合边界定位流来增强边界处的特征选择性,同时通过复杂的内部感知流来确保内部的特征不变性。此外,采用过渡补偿流来修正内部和边界之间的过渡区域中可能发生的故障。特别地,提出了集成的连续扩张模块以增强内部和过渡区域处的特征不变性。在六个数据集上进行的大量实验表明,该方法优于16种最新方法。

简介

显著物体检测(SOD)旨在检测和分割可以捕捉人类视觉注意力的物体,是后续视觉任务(例如物体识别,跟踪和图像解析)之前的重要步骤。 为了解决SOD问题,在过去的几十年中,已经提出了数百种基于学习的模型。

SOD存在的关键问题

SOD存在两个关键问题需要进一步解决。
(1)大型显著物体的内部可能会出现较大的外观变化,从而很难整体检测到该显著物体(见图1(a)(b))。
(2)显著物体的边界可能很弱,因此无法与周围的背景区域区分开(见图1(c)(d))。
由于这两个问题,即使在深度学习时代,SOD仍然是一项具有挑战性的任务。
在这里插入图片描述

图1.显著对象的不同区域需要不同的功能。
(a)(b)室内特征应不因外观变化大而变化,以整体检测出显著物体;
(c)(d)边界处的特征应有选择性,以区分显著物体和背景区域之间的细微差异。
结果由C2SNet ,PAGRN和该方法生成。

SOD模型目前的困境

通过进一步研究对象内部和边界的这两个问题,发现挑战可能主要来自选择性不变性困境。在室内,SOD模型提取的特征应不随各种外观变化(例如大小,颜色和纹理)而变化。这种不变的特征确保了突出对象可以作为一个整体弹出。但是,边界上的特征应同时具有足够的选择性,以便可以很好地区分显著对象与背景区域之间的细微差别。换句话说,显著对象的不同区域对SOD模型提出了不同的要求,而这种困境实际上阻止了具有各种大小,外观和上下文的显著对象的完美分割。

基于图像的SOD连续扩张的边界感知网络设计基本思路

为了摆脱这种困境,可行的解决方案是在对象内部和边界采用不同的特征提取策略。受此启发,提出一种基于图像的SOD连续扩张的边界感知网络(boundary-aw

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值