目标检测论文阅读笔记：《ThunderNet: Towards Real-time Generic Object Detection on Mobile Devices》

最新推荐文章于 2024-07-21 00:46:40 发布
最新推荐文章于 2024-07-21 00:46:40 发布
阅读量452 收藏 1
点赞数
分类专栏： 目标检测 文章标签： 深度学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42075898/article/details/106817475
版权
本文提出ThunderNet，一种基于ShuffleNetV2的轻量级目标检测网络，通过CEM和SAM模块提升特征融合与注意力机制，实现高效目标检测。采用5x5卷积替代3x3卷积，优化网络结构，同时增加浅层特征通道数，保持轻量化特性。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

1 概述

  • 本文基于ShuffleNetV2提出了一个轻量目标检测网络，称为ThunderNet，主要有两个创新点：①CEM(Context Enhancement Module)，与FPN类似，用于融合浅层特征和深层特征；②SAM(Spatial Attention Module)，用于增强目标特征
  • 轻量化体现在两方面：①将ShuffleNetV2中3x3卷积更换为5x5卷积，在增大感受野使特征包含更多空间信息的同时降低参数量；②移除conv5的同时在之前的stage中增加channel数，这在不增加参数量的情况下可使浅层特征增多。

2 网络框架

2.1 整体框架

在这里插入图片描述

2.2 CEM模块

在这里插入图片描述

  • 类似FPN，其意义在于融合多个尺度信息，使生成的特征包含更多的空间信息

2.3 SAM模块

在这里插入图片描述

  • RPN用于分类前景背景，其中背景特征会被抑制，因此论文中提出将RPN特征作为监督信号用来抑制CEM特征中的背景部分，增强CEM特征中的前景部分。
  • 该结构的另外一个优点是反向传播过程中这里也会产生梯度，也算是RPN结构参数更新时的监督信号

3 实验

  • 算法对比

在这里插入图片描述

  • 不同分辨率输入图片

在这里插入图片描述

  • 不同backbone

在这里插入图片描述

  • 消融实验
    在这里插入图片描述
  • SAM模块效果

在这里插入图片描述

4 总结

  • CEM中增大特征感受野的思路不错，也可以使用空洞卷积等，可以借鉴
  • 将RPN特征作为监督信号引入很新颖，值得学习
【论文阅读笔记】ThunderNet: Towards Real-time Generic Object Detection
梁瑛平的博客
01-31 721
《ThunderNet: Towards Real-time Generic Object Detection》（一）论文地址：（二）解决的问题：（三）ThunderNet 的核心思想：（四）Backbone Part——SNet：1. Receptive Field（感受野）：2. Early-stage and Late-stage Features：3. SNet 的结构：（五）上下文增强模...
目标检测论文：ThunderNet: Towards Real-time Generic Object Detection（arxiv2019）
mingo_敏
03-31 6163
ThunderNet：第一个实现了在ARM平台上的实时检测器和最快的单线程速度。 论文地址：https://arxiv.org/pdf/1903.11752.pdf 本文创新点颇多，而且很辅以充实的实验分析和对比。首先是整体架构如下图，整体的网络结构分为两部分：Backbone部分和Detection部分。网络的骨干部分为SNet，SNet是基于ShuffleNetV2进行修改得到的。 网络...
ThunderNet Towards Real-time Generic Object Detection
03-31
Real-time generic object detection on mobile platforms is a crucial but challenging computer vision task. However, previous CNN-based detectors suffer from enormous computational cost, which hinders them from real-time inference in computation-constrained scenarios. In this paper, we investigate the effectiveness of two-stage detectors in real-time generic detection and propose a lightweight two-stage detector named ThunderNet. In the backbone part, we analyze the drawbacks in previous lightweight backbones and present a lightweight backbone designed for object detection. In the detection part, we exploit an extremely efficient RPN and detection head design. To generate more discriminative feature representation, we design two efficient architecture blocks, Context EnhancementModule and Spatial Attention Module. At last, we investigate the balance between the input resolution, the backbone, and the detection head. Compared with lightweight one-stage detectors, ThunderNet achieves superior performance with only 40% of the computational cost on PASCALVOC and COCO benchmarks. Without bells and whistles, our model runs at 24.1 fps on an ARM-based device. To the best of our knowledge, this is the first real-time detector reported on ARM platforms. Code will be released for paper reproduction.
【ThunderNet】《ThunderNet: Towards Real-time Generic Object Detection on Mobile Devices》
bryant_meng
02-29 648
ICCV-2019 文章目录1 Background and Motivation2 Advantages / Contributions3 Method4 Experiments4.1 Datasets5 Conclusion（own） / Future work 1 Background and Motivation 2 Advantages / Contributions 3 Met...
ThunderNet: Towards Real-time Generic Object Detection on Mobile Devices
qq_52302919的博客
04-29 1165
本文提出了一种轻量级的两级检测器ThunderNet。在主干部分，提出了一种用于目标检测的轻量级主干。在检测部分，开发了一种非常高效的RPN和检测头设计。为了生成更具区分性的特征表示，设计了两个高效的结构模块：上下文增强模块和空间注意模块。最后，作者研究了输入分辨率、主干和检测头之间的平衡。得益于高效的主干和检测部件设计，ThunderNet超越了以前的轻型单级检测器。
Faster R-CNN Towards Real-Time Object Detection With Region Proposal Networks
08-06
5. “Real-Time Object Detection（实时目标检测）”：论文的最终目标是实现实时的目标检测。对于非常深的VGG-16模型，作者提出的检测系统在GPU上可以达到5fps的帧率，同时在PASCAL VOC 2007和2012数据集上实现了最...
线段检测：Towards Light-weight and Real-time Line Segment Detection Towards Light-weight and Real【方法解读】
最新发布
sinat_39783664的博客
07-21 1万+
“线段检测M-LSD-tiny”方法解读
ThunderNet: Towards Real-time Generic Object Detection（论文精度）
qq_42738654的博客
01-03 255
摘要 本文提出了第一个在arm上运行的实时的单线程速度最快的模型结构，分析之前lightweight backbones 的缺点，提出了一个轻量级的backbone，充分使用RPN，设计SAM和CEMblock减少计算量，产生更多discriminative feature，最后寻求resolution，backbone与head之间的平衡。 ——————————————————————————...
ThunderNet: Towards Real-time Generic Object Detection论文学习
calvinpaean的博客
11-11 313
Abstract 在移动端进行实时、通用的目标检测是非常重要，也非常艰巨的计算机视觉任务。但是，之前的基于CNN的检测器都要承受巨大的算力支出，使得它们无法在算力有限的场景中进行实时推理。在这篇论文中，作者探索了实时通用的双阶段检测器的有效性，提出了一个轻量级的双阶段检测器，称作 ThunderNet。在主干网络部分，作者分析了之前轻量级主干网络的缺陷，提出了一个用于目标检测的轻量级主干网络。在检...
LCDet Low-Complexity Fully-Convolutional Neural Networks for Object Detection in Embedded Systems
TJMtaotao的博客，高校计算机教师
11-29 1211
Subarna Tripathi UC San Diego∗ stripathi@ucsd.edu Byeongkeun Kang UC San Diego bkkang@ucsd.edu V asudev Bhaskaran Qualcomm Inc. vasudevb@qti.qualcomm.com Truong Nguyen UC San Diego tqn001@eng.ucsd.edu...
【目标检测】|ShuffleNet
qq_35608277的博客
06-01 387
分组卷积（Group Convolution中的channel shuffle） 子单元
目标检测论文：ShuffleNet V2: Practical Guidelines for Efficient CNN Architecture Design及其PyTorch实现
mingo_敏
07-22 974
ShuffleNet V2: Practical Guidelines for Efficient CNN Architecture Design 论文链接：https://arxiv.org/pdf/1807.11164.pdf PyTorch：https://github.com/shanglianlm0525/Lightweight-network ShuffleNet V2 unit Sh...
面捕：《Real-time Facial Animation on Mobile Devices》
Mingx9527
04-09 3788
《Real-time Facial Animation on Mobile Devices》 作者：Yanlin Weng, Chen Cao, Qiming Hou, Kun Zhou 来源：浙大 文章目录0 Abstract1 Introduction2 Facial Motion Regression3 Handling Lighting Changes4 Experimental Resu...
ThunderNet: Towards Real-time Generic Object Detection论文阅读
donkey_1993的博客
04-10 3796
论文下载地址：https://arxiv.org/pdf/1903.11752.pdf 代码地址：等待开源，开源会第一时间发出来。 论文摘要： 目标检测算法在移动平台仍然是一个挑战。基于CNN的检测算法由于计算量很大很难在移动平台达到实时检测的要求。本论文中作者提出了实时检测的轻量级的two-stage算法。在基础网络部分，作者提出了一个轻量级的基础网络。在检测部分，作者...
ShuffleNet模型解读
h__ang的博客
03-16 2237
原文链接：：https://arxiv.org/abs/1707.01083 Abstract 论文提出了一种计算效率极高的卷积神经网络结构——ShuffleNet，它是专门为计算能力有限的移动平台设计的。这个新结构用来两个新操作——逐渐群卷积(pointwise group convulution)和通道混洗(channel shuffle)在保障精确率损失不大的同时大大减少了计算成本。基于Im...
BN(Batch Normalization) 原理与使用过程详解
热门推荐
donkey_1993的博客
08-20 8万+
论文名字：Batch Normalization: Accelerating Deep Network Training by  Reducing Internal Covariate Shift 论文地址：https://arxiv.org/abs/1502.03167       BN被广泛应用于深度学习的各个地方，由于在实习过程中需要修改网络，修改的网络在训练过程中无法收敛，就添加了BN...
轻量级实时目标检测网络--ThunderNet：轻量级实时检测网络
yychentracy的博客
06-21 7117
网络的整体结构 网络的整体结构包括，backbone部分和detection 部分，骨干网络是SNet，这个网络i是基于shuffleNetV2进行修改得到的。网络的检测部分，利用了压缩的RPN网络，修改Light-Head R-CNN网络提高效率，CEM整合局部和全局特征增强网络特征的表达能力，并提出了SAM空间注意力机制，引入来自RPN的前后景信息用以优化特征分布。 二：backbone部分...
目标检测论文：ShuffleNet: An Extremely Efficient Convolutional Neural Network for Mobile Devices及其PyTorch实现
mingo_敏
07-22 745
ShuffleNet: An Extremely Efficient Convolutional Neural Network for Mobile Devices 论文链接：https://arxiv.org/pdf/1707.01083.pdf PyTorch：https://github.com/shanglianlm0525/Lightweight-network import torch...
faster r-cnn: towards real-time object detection with region proposal networks
06-28
Faster R-CNN是一种基于区域建议网络（Region Proposal Networks，RPN）的物体检测算法，旨在实现实时物体检测。它通过预测每个区域是否含有物体来生成候选框，并使用卷积神经网络（CNN）来确定候选框中的物体类别。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值