今天做了一个导入，分别导入xlsx和csv格式的文件，看看用时和内存情况吧

最新推荐文章于 2023-04-30 10:49:03 发布
最新推荐文章于 2023-04-30 10:49:03 发布
阅读量1.3k 收藏
点赞数
分类专栏： java 文章标签： cvs java excel poi
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/gwcgwcjava/article/details/42560811
版权
25万条数据：
xlsx文件：用时481699毫秒
内存使用情况






cvs文件：用时387626毫秒

内存使用情况：



红线前面是导入xlsx文件的内存使用情况，红线后面是导入cvs文件的内存使用情况，用时相差将近一分钟

很明显导入cvs格式的文档优势很明显

所以大数据导入不要死抠excel,稍微已转换，导入csv格式的不会造成内存溢出，并且导入速度要快！




gwcgwcjava
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
java excel 内存溢出_解决Java导入excel大量数据出现内存溢出的问题
weixin_28731231的博客
02-21 2532
问题：系统要求导入40万条excel数据，采用poi方式，服务器出现内存溢出情况。解决方法：由于HSSFWorkbook workbook = new HSSFWorkbook(path)一次性将excel load到内存中导致内存不够。故采用读取csv格式。由于csv的数据以x1,x2,x3形成，类似读取txt文档。private BufferedReader bReader;/*** 执行文件...
csv excel 对比
lcf枫的博客
05-17 2934
对比csv excel 处理 目前项目需要上传非常大的excel文件。几百兆到几个G之间。上传的问题还没有解决。但是load到内存也是个问题。excel 一般使用xlrd 包做解析，第一个操作肯定是open_workbook。但是在open_workbook的时候会把整个文件load 到内存，如果多个文件同时在做处理可能会内存溢出，所以存在很大风险。技术上对比csv. 看看两者个差异。 准备工...
pandas读写csv excel pinkle 的性能比较
weixin_38296425的博客
05-08 2096
在数据分析工作中，csv、excel、pinkle这三种格式的文件经常会被用到，但是pandas读取这3种格式的数据究竟性能如何呢，我准备了13列 17519行的excel数据 测试了一下，结果是这样： csv xls pickle 字节数MB 1.26 1.09 1.13 读数据耗费时间：秒 0.044 4.992 0.009 写数据耗费时间：秒 0.336 15.982 0.01 从这个测试结果可以得到以下结论.
csv与xlsx导出
weixin_30725467的博客
10-05 389
一.csv与xlsx格式基本介绍 csv即comma seperate values - 逗号分隔值，文件以纯文本形式来存储表格数据，它可以由任意数目的记录组成，记录之间通过某种换行符来分隔如 ’\r\n’，而每条记录由字段组成，字段之间的分隔符一般通过逗号来分隔即 ’,’，因此csv是一种比较简单的文件格式，在编辑器中打开如下所示 x...
java 导入Excel 文件，支持xls、xlsx、csv格式
09-19
java 导入Excel 文件，兼容Excel 2003（后缀名：xls）及 2007（后缀名：xlsx）的文件，同时还支持csv格式的文件
java 读CSV 和 Excel
weixin_30622107的博客
08-29 331
1、csv和excel读写对比 开发中经常遇到数据导入和导出功能，csv 和 excel是最常见的数据格式，本文比较了下csv和excel读写相同数据的效率： 测试数据格式一 用上面模板数据生成的测试： 耗时时间统计： 测试数据格式二 生成数据： 耗时统计： 相同格式相同行数对比： csv文件比excel文件稍大 csv读取/写入比e...
【数据读写】csv文件与xls/xlsx文件
热门推荐
总结论文中的算法并给出论文的复现代码
04-27 1万+
分析csv文件与xls/xlsx文件的异同，介绍这两类文件数据的读取和写入方法，最后给出一些应用实例，后续会更新。
【easypoi】easypoi导入csv格式的文件
JeffHan^_^的博客
09-01 2320
我在这里写导入的时候，遇到了一个我百思不得其解的问题，导入的数据行数是对的，但是所有的数据都是null，网上搜了一下，根本搜不到解决方案，于是下载源码一步一步调试，终于发现问题，发现CSV的表头导入的时候全部乱码了，和注解里的文字注释根本对应不上，所以导入的数据全部是null。各位如果也出现类型的情况，用notepad打开你的文件，看看你的文件编码是什么，这里设置一下，再导入就好了。这里使用的注解就和导入Excel时的一摸一样，不需要做什么特殊处理。...
报表技术3-EasyPOI
weixin_43994244的博客
12-23 1919
EasyPOI的简单使用
springboot整合easypoi实现文件导入导出OSS文件上传和下载。OSS图片导出
01-07
代码简单容懂。下载就可以运行。该列子包过了easypoi注解导出exel表格同时导出oss中的图片到exel表格中。
excel cvs/xls/xlsx导入数据库的详细代码
09-23
三种方法，我都实现了！其实就是应用phpexcel这个类库！
CSV导出类库(Easy CSV Export)源码
03-23
轻量级的CSV导出类库，代码量小，使用简单，可以导出为File，TextWriter，HttpResponse。 有测试代码可供参考。 欢迎转载。
poi导出cvs文件
08-12
NULL 博文链接：https://x125858805.iteye.com/blog/2279050
读取Excel文件xls、xlsx、csv格式文件，读取txt文件
07-15
//C# 读取Excel文件、C#读取xls文件、C#读取xlsx文件、C#读取csv文件 //C# 将xls文件转换为DataTable、C#将xlsx文件转换为DataTable //C#将csv文件转换为DataTable //C#将txt文件转换为DataTable（列与列之间空格隔...
python3读取csv和xlsx文件的实例
09-20
今天小编就为大家分享一篇python3读取csv和xlsx文件的实例，具有很好的参考价值，希望对的大家有所帮助。一起跟随小编过来看看吧
csv格式批量转换xlsx
01-25
csv格式批量转换xlsx，将csv文件放在D:\csv，D盘新建xlsx文件夹，执行toxlsx.exe
读写xls 和 xlsx格式的excel文件
05-20
app 里面 可以读写xls 和xlsx格式的文件
CSV和XLSX文件格式的区别
最新发布
qq_44591229的博客
04-30 3728
CSV和XLSX文件格式的区别
python读取一个xlsx文件并转换为csv格式
03-31
可以使用Python中的pandas库来读取和转换xlsx文件为csv格式。以下是一个示例代码： ```python import pandas as pd # 读取xlsx文件 df = pd.read_excel('file.xlsx') # 将数据保存为csv格式 df.to_csv('file.csv'...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值