tf.ReaderBase

参考   tf.ReaderBase - 云+社区 - 腾讯云

目录

1、__init__

2、属性

3、num_records_produced

4、num_work_units_completed

5、read

6、read_up_to

7、reset

8、restore_state

9、serialize_state


用于不同读取器类型的基类,该基类将生成每个步骤的记录。从概念上讲,读取器将字符串“工作单元”转换为记录(键、值对)。通常,“工作单元”是文件名,记录是从这些文件的内容中提取的。我们希望每个步骤生成一条记录,但是一个工作单元可以对应多个记录。因此,我们引入了一些使用队列的解耦。队列包含工作单元,当请求读取器生成一条记录(通过Read())但它已经完成了最后一个工作单元时,读取器将从队列中退出。

Eager Compatibility

读取器与急于执行不兼容。相反,请使用tf.data将数据放入模型中。

1、__init__

__init__(
    reader_ref,
    supports_serialize=False
)

创建一个新的ReaderBase。

参数:

  • reader_ref:实现阅读器的操作。
  • supports_serialize:如果阅读器实现可以序列化其状态,则为True。

可能产生的异常:

  • RuntimeError: If eager execution is enabled.

2、属性

  • reader_ref:实现读取器的Op。
  • supports_serialize:阅读器实现是否可以序列化其状态。

3、num_records_produced

num_records_produced(name=None)

返回此阅读器已生成的记录的数量。这与成功执行的读操作数量相同。

参数:

  • name:操作的名称(可选)。

返回值:

  • 一个int64张量。

4、num_work_units_completed

num_work_units_completed(name=None)

返回此阅读器已完成处理的工作单元的数量。

参数:

  • name:操作的名称(可选)。

返回值:

  • 一个int64张量。

5、read

read(
    queue,
    name=None
)

返回读取器生成的下一个记录(键、值)对。如果需要,将一个工作单元从队列中取出(例如,当读取器需要开始从一个新文件中读取,因为它已经完成了前一个文件)。

参数:

  • queue:用字符串工作项表示队列句柄的队列或可变字符串张量。
  • name:操作的名称(可选)。

返回值:

  • 张量的元组(键、值)。
  • key:弦标量张量。
  • value:字符串标量张量。

6、read_up_to

read_up_to(
    queue,
    num_records,
    name=None
)

返回最多由读取器生成的num_records(键、值)对。如果需要,将一个工作单元从队列中取出(例如,当读取器需要开始从一个新文件中读取,因为它已经完成了前一个文件)。甚至在最后一个批处理之前,它返回的值也可能小于num_records。

参数:

  • queue:用字符串工作项表示队列句柄的队列或可变字符串张量。
  • num_records:要读取的记录数量。
  • name:操作的名称(可选)。

返回值:

  • 张量(键、值)的元组。
  • 键:一维弦张量。
  • 值:一维弦张量。

7、reset

reset(name=None)

将阅读器恢复到其初始清洁状态。

参数:

  • name:操作的名称(可选)。

返回值:

  • 创建操作。

8、restore_state

restore_state(
    state,
    name=None
)

将阅读器恢复到以前保存的状态。并非所有阅读器都支持恢复,因此这可能会产生未实现的错误。

参数:

  • state:一个弦张量。具有匹配类型的阅读器的串行化的结果。
  • name:操作的名称(可选)。

返回值:

  • 创建操作。

9、serialize_state

serialize_state(name=None)

生成一个字符串张量来编码阅读器的状态。并不是所有阅读器都支持序列化,因此这可能会产生未实现的错误。

参数:

  • name:操作的名称(可选)。

返回值:

  • 一个字符串张量。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
将上述代码改写成 TensorFlow 2.x 版本的代码如下: ```python import tensorflow as tf def weight(shape, stddev, wd): initial = tf.random.truncated_normal(shape, stddev=stddev) var = tf.Variable(initial) if wd is not None: weight_decay = tf.multiply(tf.nn.l2_loss(var), wd, name='weight_loss') tf.add_to_collection('losses', weight_decay) return var class MyModel(tf.keras.Model): def __init__(self, in_nodes=784, h1_nodes=100, h2_nodes=100, h3_nodes=50): super(MyModel, self).__init__() self.w1 = weight([in_nodes, h1_nodes], 0.1, 0.005) self.b1 = tf.Variable(tf.zeros([h1_nodes])) self.w2 = weight([h1_nodes, h2_nodes], 0.1, 0.0) self.b2 = tf.Variable(tf.zeros([h2_nodes])) self.w3 = weight([h2_nodes, h3_nodes], 0.1, 0.0) self.b3 = tf.Variable(tf.zeros([h3_nodes])) self.w4 = weight([h3_nodes, 10], 0.1, 0.0) self.b4 = tf.Variable(tf.zeros([10])) def call(self, inputs, prob): x = inputs y_ = tf.cast(inputs, tf.float32) h1 = tf.nn.relu(tf.matmul(x, self.w1) + self.b1) h2 = tf.nn.relu(tf.matmul(h1, self.w2) + self.b2) h2_drop = tf.nn.dropout(h2, rate=prob) h3 = tf.nn.relu(tf.matmul(h2_drop, self.w3) + self.b3) h3_drop = tf.nn.dropout(h3, rate=prob) y = tf.nn.softmax(tf.matmul(h3_drop, self.w4) + self.b4) return y model = MyModel() x = tf.keras.Input(shape=(None, 784)) prob = tf.keras.Input(shape=()) y = model(x, prob) y_ = tf.keras.Input(shape=(None, 10)) # 定义损失函数 cross_entropy = tf.reduce_mean(-tf.reduce_sum(y_ * tf.math.log(y), reduction_indices=[1])) tf.add_to_collection('losses', cross_entropy) loss = tf.add_n(tf.get_collection('losses')) # 定义优化器 train_step = tf.train.AdamOptimizer(1e-4).minimize(loss) # 训练模型 with tf.Session() as sess: sess.run(tf.global_variables_initializer()) for i in range(1000): batch_xs, batch_ys = mnist.train.next_batch(100) sess.run(train_step, feed_dict={x: batch_xs, y_: batch_ys, prob: 0.5}) ``` 在 TensorFlow 2.x 中,可以使用 `tf.reduce_mean` 和 `tf.reduce_sum` 函数来计算张量的平均值和总和;使用 `tf.math.log` 函数来计算张量的自然对数。此外,可以使用 `tf.train.AdamOptimizer` 来定义优化器,使用 `model.trainable_variables` 来获取所有可训练的变量。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Wanderer001

ROIAlign原理

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值