![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
卷积神经网络
文章平均质量分 96
我是小将
Make your hands dirty!
展开
-
CV中的无监督学习方法:MoCo
无论是CV还是NLP领域,学习一个好的特征或者表达至关重要。对于NLP,通过无监督方法学习特征已经取得好大的成功,但是在CV领域,目前主流的方案还是采用ImageNet上的有监督pretrain模型。这是因为NLP任务的输入如words属于一个离散空间,而CV任务的输入图片属于一个高维连续空间。不过,目前的一些CV领域的无监督学习方法也取得了一些较大的进展,这里介绍的MoCo就是一种比较流行的无监督学习方法。对比学习无监督学习方法主要用来学习好的特征以用于特定的下游任务,这类方法往往需要建立一个代理任原创 2021-03-20 09:13:50 · 1909 阅读 · 0 评论 -
ShuffleNetV2:轻量级CNN网络中的桂冠
文章目录设计理念网络结构TensorFlow上的实现参考近来,深度CNN网络如ResNet和DenseNet,已经极大地提高了图像分类的准确度。但是除了准确度外,计算复杂度也是CNN网络要考虑的重要指标,过复杂的网络可能速度很慢,一些特定场景如无人车领域需要低延迟。另外移动端设备也需要既准确又快的小模型。为了满足这些需求,一些轻量级的CNN网络如MobileNet和ShuffleNet被提出,...原创 2020-04-05 14:47:32 · 796 阅读 · 1 评论 -
轻量级CNN网络之MobileNetv2
文章目录Depthwise Separable ConvolutionLinear BottlenecksInverted Residuals网络结构TensorFlow上的实现小结参考MobileNet网络是Google提出主要应用在移动端的轻量级CNN网络,之前的文章(CNN模型之MobileNet)已经对MobileNetv1版本进行了详细的介绍。目前,Google已经公开了Mobile...原创 2020-04-05 14:39:29 · 2043 阅读 · 0 评论 -
最后一届ImageNet冠军模型:SENet
文章目录前言主体思路Squeeze-and-Excitation (SE) 模块Squeeze操作Excitation操作SE模块在Inception和ResNet上的应用模型效果SE模块的实现小结参考文献前言在深度学习领域,CNN分类网络的发展对其它计算机视觉任务如目标检测和语义分割都起到至关重要的作用,因为检测和分割模型通常是构建在CNN分类网络(称为backbone)之上。提到CNN分...原创 2020-04-05 13:46:24 · 2186 阅读 · 0 评论 -
PyTorch分布式训练简明教程
文章目录DistributedDataParallel内部机制实例讲解普通单卡训练分布式训练混合精度训练(采用apex)题外话参考神经网络训练加速的最简单方法是使用GPU,对弈神经网络中常规操作(矩阵乘法和加法)GPU运算速度要倍超于CPU。随着模型或数据集越来越大,一个GPU很快就会变得不足。例如,BERT和GPT-2等大型语言模型是在数百个GPU上训练的。对于多GPU训练,需要一种在不同GP...原创 2020-04-05 13:15:26 · 10628 阅读 · 5 评论 -
VoVNet:实时目标检测的新backbone网络
文章目录高效网络设计要素OSA(One-Shot Aggregation)模块VoVNetVoVNet在检测模型上的效果VoVNetV2VoVNetV2的PyTorch实现参考目前基于深度学习的目标检测模型无不依赖CNN分类网络来作为特征提取器,如SSD采用VGG,YOLO采用DarkNet,Faster R-CNN采用ResNet,我们一般称这些网络为目标检测模型的backbone。ResNe...原创 2020-04-04 22:10:37 · 15531 阅读 · 6 评论 -
目标检测|YOLOv2原理与实现(附YOLOv3)
码字不易,欢迎给个赞! 欢迎交流与转载,文章会同步发布在公众号:机器学习算法工程师(Jeemy110)欢迎关注机器学习算法工程师专栏和公众号前言YOLOv2的改进策略Batch NormalizationHigh Resolution ClassifierConvolutional With Anchor BoxesDimension ClustersNew Netw...原创 2018-06-12 15:56:17 · 6501 阅读 · 3 评论 -
你知道如何计算CNN感受野吗?这里有一份详细指南
码字不易,欢迎给个赞! 欢迎交流与转载,文章会同步发布在公众号:机器学习算法全栈工程师(Jeemy110)固定大小的CNN特征图可视化感受野计算公式附文小结本文翻译自A guide to receptive field arithmetic for Convolutional Neural Networks,原作者保留版权。感受野(receptive field,...翻译 2018-06-11 09:03:28 · 5766 阅读 · 1 评论 -
DenseNet:比ResNet更优的CNN模型
码字不易,欢迎给个赞!欢迎交流与转载,文章会同步发布在公众号:机器学习算法全栈工程师(Jeemy110)文章目录前言设计理念网络结构实验结果及讨论使用Pytorch实现DenseNet小结参考文献前言在计算机视觉领域,卷积神经网络(CNN)已经成为最主流的方法,比如最近的GoogLenet,VGG-19,Incepetion等模型。CNN史上的一个里程碑事件是ResNet模型的出现,Re...原创 2019-01-01 21:14:50 · 19200 阅读 · 4 评论