2018年06月_马卫飞

转载 GluonCV 0.2 — 计算机视觉工具包第二版

GluonCV 0.2 — 计算机视觉工具包第二版李沐关注他146 人赞了该文章作者： @解浚源简介今年四月我们发布了基于Gluon的计算机视觉工具包GluonCV，里面包含了图像识别，图像分割，和物体检测的最新算法复现和预训练模型。经过丹师们两个月的努力，我们终于完成了GluonCV的第二个版本。这个版本主要包括以下几个亮点：重新训练过的图像识别模型，精度从75.8%提升到了77.2%，以及新...

2018-06-26 21:33:24 1448

转载【深度学习调参笔记】及其经典的一篇文章：caffe+报错︱深度学习参数调优杂记+caffe训练时的问题+dropout/batch Normalization

一、深度学习中常用的调节参数本节为笔者上课笔记（CDA深度学习实战课程第一期）1、学习率步长的选择：你走的距离长短，越短当然不会错过，但是耗时间。步长的选择比较麻烦。步长越小，越容易得到局部最优化（到了比较大的山谷，就出不去了），而大了会全局最优一般来说，前1000步，很大，0.1；到了后面，迭代次数增高，下降0.01，再多，然后再小一些。 2、权重梯度消失的情况，就是当数值接近于正向∞，求导之后...

2018-06-24 17:54:55 465

转载【深度学习参数笔记2】Caffe:深度学习中 epoch，[batch size], iterations的区别

在大部分深度学习架构中都抛不开三个概念epoch，[batch size], iterations；接下来就对这三个概念逐一解释一下one epoch：所有的训练样本完成一次Forword运算以及一次BP运算batch size：一次Forword运算以及BP运算中所需要的训练样本数目，其实深度学习每一次参数的更新所需要损失函数并不是由一个{data：label}获得的，而是由一组数据加权得到的，...

2018-06-24 17:48:55 604

转载【深度学习参数笔记1】谈谈深度学习中的 Batch_Size

谈谈深度学习中的 Batch_SizeBatch_Size（批尺寸）是机器学习中一个重要参数，涉及诸多矛盾，下面逐一展开。首先，为什么需要有 Batch_Size 这个参数？Batch 的选择，首先决定的是下降的方向。如果数据集比较小，完全可以采用全数据集（ Full Batch Learning ）的形式，这样做至少有 2 个好处：其一，由全数据集确定的方向能够更好地代表样本总体，从而更准确地...

2018-06-24 17:43:05 719

转载【TensorFlow-AlexNet笔记3】tensorflow实现卷积神经网络(AlexNet)

一、实验要求 1.使用卷积神经网络实现图片分类，数据集为OxFlowers17；二、实验环境 Anaconda2-4.3.1（Python2.7），tensorflow-cpu。三、实验原理3.1 数据读取已知数据集是连续80个样本为一个分类，有17个类别，所以一共只有1360个样本，所以首先用一个函数把每一类的样本分到一个文件夹，文件夹的名字从0开始...

2018-06-21 22:56:10 462

转载【TensorFlow-AlexNet笔记2】AlexNet原理及Tensorflow实现

AlexNet的出现点燃了深度学习的热潮,下面对其进行介绍,并使用tensorflow实现.1. AlexNet网络结构图片来源:AlexNet的论文整个网络有8个需要训练的层,前5个为卷积层,最后3层为全连接层.第一个卷积层输入的图片大小为:224*224*3第一个卷积层为:11*11*96即尺寸为11*11,有96个卷积核,步长为4,卷积层后跟ReLU,因此输出的尺寸为 224/4=56,去掉...

2018-06-18 16:46:03 691

转载【TensorFlow-AlexNet笔记1】基于TensorFlow实现AlexNet网络的构建、测试、微调过程

转载自:https://blog.csdn.net/jyy555555/article/details/80498275本文主要参照博客中内容实现AlexNet网络的构建、测试过程，利用自己的方法制作训练集来进行微调过程。本文主要介绍在TensorFlow框架下AlexNet网络的实现程序。下图是AlexNet网络的网络结构：1. AlexNet网络的构建过程：下面程序（注释）创建了一个类来定义A...

2018-06-18 16:39:26 1520

原创深度学习分类网络

主要介绍一些分类网络，并计算了FLOPS，参数个数和感受野信息，方便大家查询。很多本人没有用过，另外也没有认真校对，有可能有错误。 1 VGG-16VGG16[1]是非常经典的模型，好用，是2014 ImageNet的亚军(有可能是vgg-19)。核心思想：小核，堆叠。主要分成5个stages,22333，13个卷积层，16的意思应该是加上3个FC层。每个stage后面都跟着一个pool来减小尺寸...

2018-06-18 16:23:20 23772 2

转载 TensorFlow中cnn-cifar10样例代码详解

TensorFlow是一个支持分布式的深度学习框架，在Google的推动下，它正在变得越来越普及。我最近学了TensorFlow教程上的一个例子，即采用CNN对cifar10数据集进行分类。在看源代码的时候，看完后有一种似懂非懂的感觉，又考虑到这个样例涵盖了tensorflow的大部分语法知识，包括QueueRunners机制、Tensorboard可视化和多GPU数据并行编程等。“纸上得来终觉浅...

2018-06-18 16:08:53 1174

转载 TensorFlow中的队列

引子队列(queue)是TensorFlow中的重要组成部件。所有队列管理器被默认加入图的tf.GraphKeys.QUEUE_RUNNERS集合中。在读入数据的这个例子中，可以在构建完图之后，打印出图中队列的相关信息：queue_runners = tf.get_collection(tf.GraphKeys.QUEUE_RUNNERS)for qr in queue_runners: ...

2018-06-18 15:46:47 666

转载 tensorflow载入数据的三种方式

Tensorflow数据读取有三种方式：Preloaded data: 预加载数据Feeding: Python产生数据，再把数据喂给后端。Reading from file: 从文件中直接读取这三种有读取方式有什么区别呢？我们首先要知道TensorFlow(TF)是怎么样工作的。TF的核心是用C++写的，这样的好处是运行快，缺点是调用不灵活。而Python恰好相反，所以结合两种语言的优势。涉及...

2018-06-18 15:31:40 229

原创【Tensorflow_DL_Note17】CIFAR10代码使用过程中出现的错误及其解决办法

1．AttributeError: 'module' object has noattribute 'random_crop'解决方案：将distorted_image= tf.image.random_crop(reshaped_image, [height, width])改为：distorted_image = tf.random_crop(reshaped_image,[heigh...

2018-06-18 14:45:55 2615

转载 tf.gfile函数和gfile.MakeDirs(FLAGS.train_dir)函数的详细说明

简介这些函数和python中的os模块非常的相似，一般都可以用os模块代替吧gfile API介绍下面将分别介绍每一个gfile API！2-1）tf.gfile.Copy(oldpath, newpath, overwrite=False)拷贝源文件并创建目标文件，无返回，其形参说明如下：oldpath：带路径名字的拷贝源文件；newpath：带路径名字的拷贝目标文件；overwrite：目标文...

2018-06-18 12:15:35 3551

转载 tf.app.flags.DEFINE_string()和tf.app.flags.FLAGS

在看SSD的TensorFlow源码（链接点击打开链接）时遇到了这tf.app.flags.DEFINE_string()函数和tf.app.flags.FLAGS变量，于是翻阅TensorFlow官网API结果竟然是。。。真是相当于白说，意思还是让我自己看源码。。。。。。。于是上网找，还是找到了Stack Overflow里的一个解答点击打开链接答案说其实这个，很多时候看TensorFlow的A...

2018-06-18 11:34:42 1312 2

转载深度学习中的epochs，batch_size，iterations详解---对这三个概念说的比较清楚

深度学习框架中涉及很多参数，如果一些基本的参数如果不了解，那么你去看任何一个深度学习框架是都会觉得很困难，下面介绍几个新手常问的几个参数。batch深度学习的优化算法，说白了就是梯度下降。每次的参数更新有两种方式。第一种，遍历全部数据集算一次损失函数，然后算函数对各个参数的梯度，更新梯度。这种方法每更新一次参数都要把数据集里的所有样本都看一遍，计算量开销大，计算速度慢，不支持在线学习，这称为Bat...

2018-06-18 00:53:37 59722 7

转载 tensorflow数据读取机制--图解文件队列

转载自:https://zhuanlan.zhihu.com/p/27238630十图详解tensorflow数据读取机制（附代码）何之源新书《21个项目玩转深度学习——基于TensorFlow的实践详解》已上线京东，天猫～关注他584 人赞了该文章在学习tensorflow的过程中，有很多小伙伴反映读取数据这一块很难理解。确实这一块官方的教程比较简略，网上也找不到什么合适的学习材料。今天这篇文...

2018-06-17 21:42:22 1208

转载 CIFAR10/CIFAR100数据集介绍---有Python版本的二进制数据格式说明

CIFAR-10/CIFAR-100数据集解析觉得有用的话,欢迎一起讨论相互学习~Follow Me参考文献CIFAR-10/CIFAR-100数据集CIFAR-10和CIFAR-100被标记为8000万个微小图像数据集的子集。他们由Alex Krizhevsky，Vinod Nair和Geoffrey Hinton收集。CIFAR-10数据集CIFAR-10数据集由10个类的60000个32x3...

2018-06-17 19:41:49 4388 1

转载【CUDA】CUDA9.0+VS2017+win10详细配置

转载自:https://blog.csdn.net/u013165921/article/details/77891913CUDA9.0下载地址:链接：https://pan.baidu.com/s/1acwBDuGHac-C-qDhyeid7w 密码：4x16CUDA9.0是目前最新的Cuda版本，VS2017也是目前最新的Visual Studio版本，当前（2017/09）网上很少有CUDA...

2018-06-04 12:56:28 11822 4

转载【Matlab笔记1】安装matlab 2016a win64系统

第1步：下载、解压安装文件。https://pan.baidu.com/s/1o8n9hsI 密码：vu3h里面有两个压缩文件：MATLAB R2016a win64 crack.zip和R2016a_win64.iso，第一个是软件破解压缩包，第二个是软件安装包。将这个两个压缩包解压到文件夹，在R2016a_win64.iso文件夹中找到setup.exe，双击开始安装第2步：安装程序启动后选择...

2018-06-01 10:17:47 1984

maweifei的博客