2017年06月_marsjhao

原创神经网络结构盘点Neural Networks Zoo

原文地址：图文并茂的神经网络架构大盘点：从基本原理到衍生关系http://mp.weixin.qq.com/s?__biz=MzA3MzI4MjgzMw==&mid=2650719170&idx=1&sn=68b6b7f87677f5287b6e5a306409653b&chksm=871b07bcb06c8eaa0a649d7d3fd7963423dd4ea51b6e7711bc63653a

2017-06-20 15:01:12 4069 1

原创深度学习经典卷积神经网络之GoogLeNet（Google Inception Net）

一、GoogLeNet相关论文及下载地址[v1] Going Deeper withConvolutions, 6.67% test error，2014.9论文地址：http://arxiv.org/abs/1409.4842[v2] Batch Normalization:Accelerating Deep Network Training by Reducing Internal

2017-06-12 10:58:05 37973 1

原创深度学习经典卷积神经网络之VGGNet

论文地址：https://arxiv.org/abs/1409.1556VGGNet是牛津大学计算机视觉组（VisualGeometry Group）和GoogleDeepMind公司的研究员一起研发的的深度卷积神经网络。VGGNet探索了卷积神经网络的深度与其性能之间的关系，通过反复堆叠3*3的小型卷积核和2*2的最大池化层，VGGNet成功地构筑了16~19层深的卷积神经网络。VGGNet

2017-06-09 11:31:35 45255 10

原创深度学习经典卷积神经网络之AlexNet

论文地址：http://papers.nips.cc/paper/4824-imagenet-classification-with-deep-convolutional-neural-networks.pdf中文翻译：http://blog.csdn.net/liumaolincycle/article/details/504964991. 网络结构2012年，Hinton的学生Al

2017-06-09 08:24:36 7660

原创 TensorFlow应用之进阶版卷积神经网络CNN在CIFAR-10数据集上分类

一、概述1. 数据集简介本文使用的数据集是CIFAR-10，这是一个经典的数据集，包含了60000张32*32的彩色图像，其中训练集50000张，测试集10000张，如同其名字，CIFAR-10数据集一共标注为10类，每一类6000张图片，这10类分别是airplane、automobile、bird、cat、deer、dog、frog、horse、ship和truck。类别之间没有重

2017-06-07 15:52:50 18248 5

原创 TensorFlow实现Batch Normalization

一、BN（Batch Normalization）算法1. 对数据进行归一化处理的重要性神经网络学习过程的本质就是学习数据分布，在训练数据与测试数据分布不同情况下，模型的泛化能力就大大降低；另一方面，若训练过程中每批batch的数据分布也各不相同，那么网络每批迭代学习过程也会出现较大波动，使之更难趋于收敛，降低训练收敛速度。对于深层网络，网络前几层的微小变化都会被网络累积放大，则训练数

2017-06-06 11:29:19 13572

原创 TensorFlow搭建神经网络最佳实践样例

一、TensorFlow完整样例在MNIST数据集上，搭建一个简单神经网络结构，一个包含ReLU单元的非线性化处理的两层神经网络。在训练神经网络的时候，使用带指数衰减的学习率设置、使用正则化来避免过拟合、使用滑动平均模型来使得最终的模型更加健壮。程序将计算神经网络前向传播的部分单独定义一个函数inference，训练部分定义一个train函数，再定义一个主函数main。完整...

2017-06-01 14:35:21 9421

原创 TensorFlow变量管理

一、TensorFlow变量管理1. TensorFLow还提供了tf.get_variable函数来创建或者获取变量，tf.variable用于创建变量时，其功能和tf.Variable基本是等价的。tf.get_variable中的初始化方法（initializer）的参数和tf.Variable的初始化过程也类似，initializer函数和tf.Variable的初始化方法是一一对

2017-06-01 11:40:24 8218 3

原创 TensorFlow模型保存和提取方法

一、TensorFlow模型保存和提取方法1. TensorFlow通过tf.train.Saver类实现神经网络模型的保存和提取。tf.train.Saver对象saver的save方法将TensorFlow模型保存到指定路径中，saver.save(sess,"Model/model.ckpt")，实际在这个文件目录下会生成4个人文件：checkpoint文件保存了一个录下多有的模

2017-06-01 11:25:25 83002 3

marsjhao Blog