张树刚的专栏

原创 python文件分段的两种方式

方式一：# In[]方式二：#%%

原创 Indoor Scene Recognition 室内场景识别数据集

为下一步论文做准备。有一个数据集过大，100多个G，从网上找到一个轻量级的室内场景识别数据集，MIT的，在这里留存一下。数据集下载链接：http://web.mit.edu/torralba/www/indoor.html

转载 使用caffe训练时Loss变为nan的原因

今天遇到NaN的问题，按照下文提示改了learning rate成功跑通。特此转载。转载自：https://zhuanlan.zhihu.com/p/25110930梯度爆炸原因：梯度变得非常大，使得学习过程难以继续现象：观察log，注意每一轮迭代后的loss。loss随着每轮迭代越来越大，最终超过了浮点型表示的范围，就变成了NaN。措施： 1. 减

原创 生成TFRecords文件代码（最终版，亲测可用）

直接上代码，然后底下补充注意事项。亲测可用#coding:utf-8import tensorflow as tfimport osimport os.pathos.environ["CUDA_VISIBLE_DEVICES"] = "1"def _int64_feature(value): return tf.train.Feature(int64_list=tf

原创 tensorflow图片预处理和测试效果（resize，crop，pad等）

#%% 读图片代码import matplotlib.pyplot as plt # plt 用于显示图片import matplotlib.image as mpimg # mpimg 用于读取图片import tensorflow as tftest_image = 'G:/ZhangSG/01.jpg'image_raw_data_jpg = tf.gfile.FastGFile

原创 Tensorflow InvalidArgumentError Invalid JPEG data, size xxxx

非常多次遇到这个问题，今天把来龙去脉搞清楚了，在这里做个记录。一般遇到这个错误的都是在生成TFRecords文件的时候，这个错误转换过来的意思就是你生成tfrecords文件的过程中，一个size为xxxx的文件不是一个规范的jpeg文件，所以在生成tfrecords过程中出错。假设这个文件名字叫A.jpg原因如下：首先，A.jpg一定不是一个规范的jpg文件。JPEG格式是有

原创 Tensorflow中Graph的概念

一、英文文档深入解读class tf.GraphA TensorFlow computation, represented as a dataflow graph.Graph实际上是一个由数据流图表示的计算过程A Graph contains a set of Operation objects, which represent units of computation; and

原创 tensorflow官网Cifar-10改为自己的TFRecords数据集

已经改完了，中间有些过程记得比较模糊，能想起哪些就记下来哪些吧。官网Cifar-10都是已经下载好的数据集，所以一般是以bin或者压缩文件的形式存在，这一点可以在cifar10_train文件的最后一段main函数中cifar10.maybe_download_and_extract()体现，但是我们在训练过程中不会再去把自己的数据集压缩成文件再解压训练，都是直接生成TFRecor

转载 一张图说明softmax layer是什么

原创 Tensorflow tf.nn.in_top_k Error targets[0] is out of range

https://stackoverflow.com/questions/38646328/tensorflow-tf-nn-in-top-k-error-targets0-is-out-of-range越来越发现overstack上的东西含金量很高。这个错误在国内网站上绝种，在overstack上找到了这个以后大致一看就有数了。本质上是生成数据集所包含的label不存在，导致在训练的过

原创 tf.train.match_filenames_once如何验证文件是否正确读取？

用到了tf.train.match_filenames_once这个函数去读取tfrecords文件，却不知道文件是否已经读取到，

转载 关于python编码和magic变量和函数

http://www.cnblogs.com/zhuangxiu/p/4797245.htmlpython笔记_magic变量和函数前言先扯一点背景知识PEP8（Python Enhancement Proposal）是一份python的编码规范，链接：http://www.python.org/dev/peps/pep-0008/在这份编码规范中的“命名规

转载 关于python下划线命名的事儿以及magic变量相关

python笔记_magic变量和函数前言先扯一点背景知识PEP8（Python Enhancement Proposal）是一份python的编码规范，链接：http://www.python.org/dev/peps/pep-0008/在这份编码规范中的“命名规范-命名风格”这一节的最后，提到了对几种使用前置和后置下划线的，对变量的比较特殊的命名方式：单下划线开头：

原创 Python中的路径问题

相信程序员们满心欢喜拿到别人家的代码，最郁闷的一件事情就是修改路径了。斜杠反斜杠傻傻分不清楚。今天取得的经，先记下来，待考证。. 代表当前路径；.. 代表上一路径；folderA/ 或者 folderA\\ 代表folderA文件夹下的路径（也就是\ 和 // 等效）；./ 代表当前路径

原创 convert_to_records.py路径修改

# Copyright 2015 The TensorFlow Authors. All Rights Reserved.## Licensed under the Apache License, Version 2.0 (the "License");# you may not use this file except in compliance with the License.# Y

原创 Tensorflow Deep MNIST: Resource exhausted: OOM when allocating tensor with shape[10000,32,28,28]

今天测试卷积神经网络报了如题所示的错误，我跑的代码如下。from tensorflow.examples.tutorials.mnist import input_datamnist = input_data.read_data_sets('MNIST_data', one_hot=True)import tensorflow as tfsess = tf.InteractiveSes