MXNet数据格式转化

最新推荐文章于 2024-09-21 22:34:33 发布

__Sunny__

最新推荐文章于 2024-09-21 22:34:33 发布

阅读量2.6k

点赞数 1

分类专栏： MXNet 文章标签： MXnet

本文链接：https://blog.csdn.net/s_sunnyy/article/details/54412650

版权

本文档介绍了如何在MXNet中将JPEG格式的图像数据集转换为RecordIO格式，以便于训练和验证。通过使用MXNet提供的工具，将单独的图像文件转换成RecordIO文件，提高读取效率。教程中详细说明了如何组织图像文件，生成包含标签和路径的索引文件，以及如何调整图像大小和质量，并利用多线程加速打包过程。

摘要由CSDN通过智能技术生成

最近在学习使用MXNet，train_mnist.py可以正常跑，但是由于服务器无法联网，imagenet的数据集无法从网上下载，只好自己下载了JPEG类型的数据集，然后参考MXNet的官方文档，学习怎么转化为MXNet的文件格式rec。

以下为官方文档内容[mxnet/example/image-classification/README.md]

Prepare Datasets

The recommended data format is RecordIO, which concatenates multiple examples into seekable binary files for better read efficiency. We provide a tool im2rec.py located in tools/ to convert individual images into .rec files.

在MXNet中提供了一个工具 im2rec.py 将原始图片转化为.rec 文件， im2rec.py 在tools/ 下。

For a simple tutorial, assume all images are stored as individual image files such as .png or .jpg, and images belonging to the same class are placed in the same directory. All these class directories are