论文源码解读
急流勇进
越努力,越幸运。
展开
-
SqueezeNet网络讲解
原文地址:https://zhuanlan.zhihu.com/p/31558773引言SqueezeNet是Han等提出的一种轻量且高效的CNN模型,它参数比AlexNet少50x,但模型性能(accuracy)与AlexNet接近。在可接受的性能下,小模型相比大模型,具有很多优势:(1)更高效的分布式训练,小模型参数小,网络通信量减少;(2)便于模型更新,模型小,客户端程序容易更新;...转载 2019-03-27 18:33:43 · 7211 阅读 · 0 评论 -
shuffle-net的pytorch代码
pytorch理论:源码代码:#!/usr/bin/env python# -*- coding: utf-8 -*-import mathimport torchimport torch.nn as nnimport torch.nn.functional as Fclass Bottleneck(nn.Module): # shuffle Net 模仿的是resnet ...原创 2019-03-27 21:38:53 · 2257 阅读 · 0 评论 -
adam相关的优化器
原文来自:https://zhuanlan.zhihu.com/p/52084949选自medium,作者:Phúc Lê,机器之心编译,参与:高璇、王淑婷。Adam 自出道以来,就一直是最流行的深度学习优化器,哪怕现在其实已经有几种可能更好用的优化器……如果将 Adam 优化出现以来产生的关于优化过程的有趣想法按时间顺序排列的话,结果如下:LR Range test + Cycl...转载 2019-03-28 22:28:41 · 6264 阅读 · 0 评论