爱恨交加的EfficientNet(复合缩放方法)

EfficientNet论文探讨了对卷积神经网络的模型扩展,通过复合缩放方法在宽度、深度和分辨率上均衡调整,以在保持高效的同时提高精度。实验表明,这种方法能大幅减少参数量和FLOPs,且性能优于MobileNets和ResNet。
摘要由CSDN通过智能技术生成

EfficientNet : Rethinking Model Scaling for Convolutional Neural Networks

论文和代码

EfficientNet论文
EfficientNet代码

简介

从题目中不难看出,本文从模型扩展(Model Scaling)的方向对CNN网络进行分析。过去几年中有着不少模型扩展的例子,ResNet(2016)可以对模型深度进行深浅变换 ( R e s N e t − 18 — — R e s N e t − 200 ) (ResNet-18——ResNet-200) ResNet18ResNet200,WideResNet(2016)和MobileNets(2017)则是对模型宽度进行调整。而且,我们知道更大的输入图像分辨率将有助于在更多FLOPS的开销下提高准确性。

网络(复合模型拓展)

下图中,(a)是一个基础网络,(b)-(d)是在基础网络的基础上对分别在宽度、深度、分辨率上进行网络扩展,(e)是本文作者提出以固定比例均匀缩放所有三个维度的复合模型扩展方法
在这里插入图片描述

问题阐述

F i F_i Fi是卷积操作。 Y i Y_i Yi是输出张量。 X i X_i Xi是输入张量,且张量大小为 < H i , W i , C i > 1 <H_i,W_i,C_i>^1 <Hi,

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值