tf.data
君莫笑xxx
积累简介中
展开
-
tf.estimator 训练demo
本文记录使用tf.estimator.DNNClassifier分类iris上代码:测试版本:tf1.xfrom __future__ import absolute_importfrom __future__ import divisionfrom __future__ import print_functionfrom six.moves.urllib.request import urlopenimport osimport numpy as npimport tensorf原创 2020-12-11 21:55:24 · 356 阅读 · 0 评论 -
tf.data.TextLineDataset 解析csv
TextLineDataset可以将文本类的数据映射到tesorflow的Dataset在csv中,因存在头部行,使用filter进行预处理上代码:from six.moves.urllib.request import urlopenimport osimport numpy as npimport tensorflow as tfIRIS_TRAINING = "iris_training.csv"IRIS_TRAINING_URL = "http://download.te原创 2020-12-11 11:50:53 · 1936 阅读 · 0 评论 -
tf.feature_column解析tfrecord
对于获取的一个tfrecord eg. a.tfrecord,若未知对应的key,则可参考tf.train.Example.FromString解析tfrecord# tfrecord结构# message Example# {# Features features = 1;# };## message Features# {# map< string, Feature > featrue = 1;# };## message Feature##原创 2020-12-10 15:53:44 · 394 阅读 · 0 评论 -
tf 解析tfrecord
对于获取的一个tfrecord eg. a.tfrecord,若未知对应的key,则可参考tf.train.Example.FromString解析tfrecord现在给出例子解析cifar10,下载链接:待发布从上面链接,得出cifar10键值:{'label': 'tf.FixedLenFeature([1], tf.int64, default_value=0', 'id': "tf.FixedLenFeature([], tf.string, default_value=''".原创 2020-12-10 11:43:43 · 394 阅读 · 0 评论 -
tf.data.Dataset.interleave
本文对tf.data.Dataset.interleave该方法做点笔记。在tensorflow中数据处理通道中,有一个方法interleave,tf定义如下:interleave( map_func, cycle_length=AUTOTUNE, block_length=1, num_parallel_calls=None)'''cycle_length和block_length参数控制元素的生成顺序。 cycle_length控制同时处理的输入元素的数量。 如果将cycle_..原创 2020-11-11 10:20:51 · 777 阅读 · 0 评论