利用Mxnet自带的工具，进行数据转化，读取图片文件

最新推荐文章于 2024-08-14 18:30:34 发布
置顶 最新推荐文章于 2024-08-14 18:30:34 发布
阅读量1.4w 收藏 12
点赞数 3
分类专栏： 深度学习 Mxnet 大数据 linux 文章标签： deep learning mxnet ubuntu linux 图片
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a350203223/article/details/50263737
版权
本文介绍了如何使用MXNet处理图片数据，包括从原生图片生成lst文件，然后将lst文件转换为MXNet的rec格式。通过make_list.py脚本创建lst文件，接着使用im2rec工具生成rec文件。最后，展示了如何创建Data Iterator来读取这些数据。
摘要由CSDN通过智能技术生成

一、MXNet，不是直接处理原生数据比如图片之类的，而是处理的自定义的一种文件格式rec。而rec格式的文件由依赖于一个描述原生数据的列表文件格式lst。

数据集：caltech256,其中包含两个文件，一个test,一个train，每个文件里面又有很多个代表类标的文件，各个文件里存放了每一类的图片。

 

二.从原生数据生成lst文件

这个图像文件列表的格式如下：

<

最低0.47元/天 解锁文章
启功
关注
专栏目录
MXNet源码解读：数据读取高级类（2）— mxnet.image.ImageIter
AI之路
03-28 3363
mxnet.image.ImageIter接口同样继承自MXNet框架下的基础数据迭代器构造类mxnet.io.DataIter，该接口是python代码实现的图像数据迭代器，且既可读取.rec文件，也可以以图像+.lst方式来读取数据，这是和mxnet.io.ImageRecordIter接口不同的地方。由于mxnet.image.ImageIter接口在以原图像+.lst文件形式读取数据时是基...
从mxnet的rec数据中还原图片
08-20
python程序，可以从mxnet的rec数据文件中，将图片还原出来
『MXNet』第五弹_MXNet.image图像处理
weixin_34234829的博客
05-23 288
简单处理API 读取图像： image.imdecode(open('../img/cat1.jpg', 'rb').read()) 图像类型转换： img.astype('float32') 图像增强流程 具体增强方式教程有很详细的示意，不再赘述 辅助函数，用于将增强函数应用于单张图片： def apply_aug_list(img, augs): ...
Python MXNet库：高效的深度学习框架
最新发布
GitHub_miao的博客
08-14 949
更多Python学习内容：ipengtao.com随着深度学习在人工智能领域的广泛应用，选择一个合适的深度学习框架至关重要。Python的MXNet库提供了一个高效且灵活的深度学习框架，支持多种语言和硬件平台。MXNet不仅适用于研究型项目，还可以应用于大规模生产环境。本文将详细介绍MXNet库的功能、安装与配置、基本和高级用法，以及如何在实际项目中应用它。MXNet库简介MXNet是一个开源的深...
MXNet之数据读取与增强，补充，读取图片训练以及数据增强，自定义迭代器
m0_37192554的博客
10-23 570
读取图片数据增强，代码，转载，可以直接使用，https://blog.csdn.net/qq_35606924/article/details/80033850 注意 path_root= “文件夹” #图片的根目录 这边的 lst文件如下，索引 label 图片相对路径，是 im2rec.py生成的， 生成的图片路径一定要是 文件夹/文件1/all jpg 文件夹/文件2/all jpg 文...
MXNet中im2rec将图片转换成二进制RecordIO格式
深度学习领域优质创作者，CSDN博客专家
12-03 799
学会将图片转换成二进制格式及复原
mxnet学习记录【1】
热门推荐
shuzfan的专栏
12-01 2万+
由于caffe依赖性太多，配置极其复杂，所以将接下来的学习转向mxnet.因此本文主要记录我的学习历程，如果描述有什么问题，欢迎大家的指正。mxnet的优点很明显，简洁灵活效率高 ，多机多卡支持好。mxnet的github下载链接：https://github.com/dmlc/mxnet/mxnet的开发文档链接：http://mxnet.readthedocs.org/en/latest/bui
使用MXNet完成一个基于FCN的盲道实时语义分割
qq_37070854的博客
07-15 2166
使用MXNet完成一个基于FCN的盲道识别语义分割一点说明基本原理测试集效果数据标注训练基本设置读入数据网络构建开始训练测试 一点说明 前段时间根据gluon的教程动手学深度学习和同学项目实地拍摄的盲道图片完成了一个基于FCN的盲道语义分割程序，也是自己第一次做语义分割的项目。一方面发现深度学习在盲道这种具有简单纹理和颜色特征的识别上具有非常好的效果，FCN这种古老的语义分割算法对于这种项目在速度...
手撕代码insightFace中的arcface_torch
m0_62789066的博客
10-15 1832
背景介绍 　　搞人脸识别的同学基本都听过insightFace 的大名，在开源工程里面可以帮助大伙快速的建立自己的baseline , 代码玩儿的溜的同学说不一定一两天就玩儿通了．原始的insightface是mxnet实现的，但是现在工业界和学术的有非常多的人使用pytorch作为自己的开发平台，这就带来了一定的局部不适．终于最近insightFace基于pytorch实现了相关的算法，并公布了性能还不错的开源预训练模型，pytorch建议到1.6.0版本以上．感谢相关的开源作者做出的贡献． 　　那么
深度学习入门
zr7116的博客
06-21 427
https://zhuanlan.zhihu.com/p/36570549 使用a.item()或np.asscalar(a)将大多数NumPy值转换为本机Python类型： import numpy as np # examples using a.item() type(np.float32(0).item()) # <type 'float'> type(np.f...
MXNet官方文档中文版教程(9)：大规模图像分类
青青韶华
10-30 5157
文档英文原版参见Large Scale Image Classification 训练大规模图像的神经网络具有很多挑战。即使使用最新的GPU，也不可能使用单个GPU在合理的时间内使用大量图像来训练大型网络。通过在单个机器中使用多个GPU可以稍微缓解这个问题。但是，可以连接到一台机器（通常为8或16个）的GPU数量是有限制的。本教程介绍了如何使用多台机器（每个包含多个GPU）来训练具有TB级数据的大型
Python读取.jpg图片，提取图片的文件名。
qq_38831822的博客
06-28 1万+
Python读取文件夹下的.jpg图片，提取图片的文件名。 最近做的图像处理，需要读取文件夹下所有图片和对应的文件名，进行相关处理，最后保存的图片要求文件的名称与原图名称一致。百度找了好多例子也没找到，最后零零碎碎的搜索，通过一些个人的思考把相关的知识点和程序结合，总算做出来了。 举个简单的功能： 读取文件夹下的图片和对应的图片名，先处理成灰度图像，再进行保存，要求保存的图片的名称与原图名称一致。 效果如下： 读取F:\image下的000~004.jpg， 最后处理的灰度图片保存在F:\image\sa
MXNet如何用mxnet.image.ImageIter直接导入图像
AI之路
07-09 8976
MXNet的图像数据导入模块主要有mxnet.io.ImageRecordIter和mxnet.image.ImageIter两个类，前者主要用来读取.rec格式的数据，后者既可以读.rec格式文件，也可以读原图像数据。这里先介绍mxnet.image.ImageIter这个类，image是个package，脚本image.py可以在~/mxnet/python/mxnet/image.py找到，里
MXNet 导入图像数据
安静会的博客
03-24 3218
MXNet框架用于做图像相关的项目时，读取图像主要有两种方式：第一种是读.rec格式的文件，类似Caffe框架中LMDB，优点是.rec文件比较稳定，移植到别的电脑上也能复现，缺点是占空间（.rec文件的大小基本上和图像的存储大小差不多），而且增删数据不大灵活。第二种是.lst和图像结合的方式，首先在前面生成.rec文件的过程中也会生成.lst文件，这个.lst文件就是图像路径和标签的对应列表，也...
Python_图片的读取写入
ghaokl的博客
11-10 1247
对于Python在OpenCV中的图片的学习
从mxnet的rec文件中恢复jpg格式
m0_37579232的博客
10-31 830
网上清一色“互相参考”的回答……： 这里迷之501195，然后搜了几个答案居然都写的501195....... 这里给出另一份答案： 参考： cvtower/seesawfacenet_pytorch: offical seesawfacenet pytorch implement, https://arxiv.org/abs/1908.09124 (github.com) def load_mx_rec(rec_path): # save_path: 转为图片后存储的位置 .
MXNet.gluon——图像I/O
TomRen
09-11 1399
MXNet gluon如何从文件夹读入图像 分类任务中需要将图像从文件夹中读入，并以迭代器的形式进行训练。gluon 的api 提供了一个方便的函数gluon.data.vision.ImageFolderDataset()，只需要将图像文件根据分类进行预处理，就可以方便的使用这个函数来读入数据。 1.图像预处理 首先这个函数要求不同分类的图像需要按照下面的格式来组织： ./train...
mxnet基础到提高(29)-读取示例数据
The research on computer technolog
04-08 389
#!/usr/bin/env python2 # -*- coding: utf-8 -*- """ Created on Fri Aug 10 16:13:29 2018 @author: myhaspl """ from mxnet import nd, gluon, init, autograd from mxnet.gluon import nn from mxnet.gluon.da...
怎么使用mxnet将自己的数据集图片做成mnist数据集
06-08
要使用mxnet将自己的数据集图片做成mnist数据集，可以按照以下步骤进行： 1. 准备自己的数据集，包括图片以及对应的标签信息。图片应该是灰度图，且尺寸应该是28x28。 2. 安装mxnet，并导入必要的模块： ```...
评论 7
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值