打造paddle数据读器Data reader取全流程【划桨员的自我修养【paddle学习笔记】】

在训练和测试时，PaddlePaddle需要读取数据。为了简化用户编写数据读取代码的工作，我们定义了

• reader是一个读取数据（从文件、网络、随机数生成器等）并生成数据项的函数。
• reader creator是返回reader的函数。
• reader decorator是一个函数，它接受一个或多个reader，并返回一个reader。
• batch reader是一个函数，它读取数据（从reader、文件、网络、随机数生成器等）并生成一批数据项。

 

paddle.reader.buffered(reader, size)

创建缓冲数据读取器。

缓冲数据reader将读取数据条目并将其保存到缓冲区中。只要缓冲区不为空，就将继续从缓冲数据读取器读取数据。

参数

• reader (callable) - 要读取的数据读取器
• size (int) - 最大缓冲

返回 缓冲数据的读取器

 

paddle.fluid.io.shuffle(reader, buffer_size)

该接口创建一个数据读取器，其功能是将原始数据读取器的数据打乱，然后返回无序的数据。
从原始数据读取器取出buf_size个数据到缓冲区&#x