基于域适应的弱监督学习的物体检测:

本文提出了一种基于域适应的弱监督学习策略,用于解决非真实场景(如水彩画)物体检测问题。在源域(如PASCAL VOC)有充足标注数据,目标域仅有少量图像级标注的情况下,通过CycleGAN进行域迁移和伪标记生成实例级标注。实验证明,这种方法能显著提升检测性能,特别是在YOLOv2和Faster R-CNN等模型上。作者构建了三个非真实场景数据集,为后续研究提供资源。
摘要由CSDN通过智能技术生成

1、简介

随着深度学习在物体检测方面的快速发展,但目前的物体检测技术主要的面向对象是真实场景下的图像,但对于像水彩画这种非真实场景下的物体检测技术来说,其一般很难获取大量的带有标注的数据集,因此问题就变得比较棘手。为解决这一问题,作者提出了基于域适应的弱监督学习策略,其可以描述为(1)、选取一个带有实例级标注的源域数据;(2)、仅有图像级标注的目标域数据;(3)、目标域数据的类别是源域数据类别的全集或子集。我们的任务就是在源域拥有充足的实例级标注的数据但目标域仅有少量图像级标注的目标域数据的情况下尽可能准确的完成实现对目标域数据的物体检测。这个任务的难点主要在于目标域没有实例级的标注,因此无法直接利用目标数据集对基于源数据集训练的模型进行微调。针对这一问题,作者提出了两种解决方法,(1)、域迁移(domain transform,DT),即利用图像转换技术,如CycleGAN将源域数据转换为和目标数据相似的带有实例级的图像。(2)利用伪标记(pseudo-labeling,PL)来对目标域数据产生伪实例级标注。两种方法如图1所示: 

 

                                                                                     图1

为验证该策略的有效性,作者分别采集并手工标注了三个分别具有实例级标注的目标数据集:Clipart1k,Watercolor2k,Comic2k。数据集及代码见:https://naoto0804.github.io/cross_domain_detection/

2、数

  • 3
    点赞
  • 12
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值