poi大数据量生成excel

最新推荐文章于 2022-04-12 19:35:16 发布
最新推荐文章于 2022-04-12 19:35:16 发布
阅读量9k 收藏 3
点赞数
分类专栏： java 基础 文章标签： excel dataset string thread exception object
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/chiperfect/article/details/6130607
版权
在使用poi生成大量数据的excel时，遇到行数限制和内存溢出问题。针对问题1，通过创建新sheet解决行数限制；对于问题2，尝试设置row为null并手动调用GC，但效果不理想，仍可能导致内存溢出。动态追加数据并适时创建新sheet是目前的解决方案。
摘要由CSDN通过智能技术生成

使用poi生成excel，当遇到大数据量时，会有几个问题：

 

1. 目前office2003 excle每个sheet最大支持行数为65536，当数据超过65536行时，会报异常

2. 当列为17列左右,数据行数达到50w条左右时，会包OOM错误

Exception in thread "15124183@qtp-16902686-1" java.lang.OutOfMemoryError: Java heap space
Exception in thread "Thread-13" java.lang.OutOfMemoryError: Java heap space
        at org.apache.poi.hssf.usermodel.HSSFRow.createCell(HSSFRow.java:141)
        at org.apache.poi.hssf.usermodel.HSSFRow.createCell(HSSFRow.java:119)

 

问题1比较好解决，每次写入数据时，都获取sheet最后一行，在最后一行后继续写入数据，判断当最大行数大于65536或再小些，生成新的sheet，就能解决此问题。

具体代码片段

   int sheetLastSize = sheet.getLastRowNum();
            // 如果数据是最大写入数的整数倍（Constants.EXCEL_SHEET_DATASIZE为最大行数）
         

最低0.47元/天 解锁文章
chiperfect
关注
专栏目录
导出大批量excel数据
weixin_44635748的博客
04-20 400
【代码】导出大批量excel数据。
java poi大数据量 导出excel
08-05
java中使用poi导出Excel大批量数据 存在两个导出方法：存在一个分批量导出ZIP文件，一个导出exel文件
POI读写超大数据量Excel，解决超过几万行而导致内存溢出的问题（附源码）
Java知音
03-16 2351
作者：牧梦者cnblogs.com/swordfall/p/8298386.html1. Excel2003与Excel2007两个版本的最大行数和列数不同，2003版最大行数是65536...
POI读写大数据量excel，解决超过几万行而导致内存溢出的问题
Swordfall的博客
01-20 4369
1. Excel2003与Excel2007 两个版本的最大行数和列数不同，2003版最大行数是65536行，最大列数是256列，2007版及以后的版本最大行数是1048576行，最大列数是16384列。 excel2003是以二进制的方式存储，这种格式不易被其他软件读取使用；而excel2007采用了基于XML的ooxml开放文档标准，ooxml使用XML和ZIP技术结合进行文件存储，XML...
使用POI导出大数据量到EXCEL
08-11
java版本的使用POI导出大数据量到EXCEL
Java使用POI导出大数据量Excel的方法
08-25
在Java开发中，导出大数据量的Excel文件可能会面临内存溢出的问题，特别是在使用Apache POI库时。这是因为默认情况下，POI会将整个Excel工作簿存储在内存中，当数据量过大时，内存消耗非常显著，可能导致系统崩溃。...
Java通过POI读取Excel遍历数据，批量生成word文档
04-09
通过这种方式，你可以根据业务需求，利用Java和Apache POI库实现Excel数据的批处理，生成大量定制化的Word文档。这个过程对于报告生成、自动化数据导出或者大规模邮件合并等场景非常有用。 这个示例代码只是一个...
使用poi根据导入模板生成excel
06-10
在本项目中，“使用poi根据导入模板生成excel”是核心任务，这意味着我们需要利用POI库处理已有的Excel模板，生成新的Excel表格，并填充数据。 首先，我们需要了解Apache POI的基本结构和使用方法。POI提供了HSSF...
使用poi导出大数据量excel
01-22
Java实现大数据量导出时，如果使用普通的POI导出会出现内存溢出等情况，该方法解决了此问题，项目中使用该方法导出67000条数据需要21秒，数万条数据导出，本人认为效率还算可以，推荐给大家
POI百万级大数据量EXCEL导出 - 请叫我猿叔叔的博客 - CSDN博客.htm
12-10
POI百万级大数据量EXCEL导出 - 请叫我猿叔叔的博客 - CSDN博客.htm
使用Poi读取大数据量excel的方法
02-09
使用Poi读取大数据量excel的方法 支持2003和2007的版本
poi读取大数据量excel文件，避免内存溢出，行级操作
02-07
poi读取大数据量excel文件，避免内存溢出，行级操作 根据本网站的资源修改的。 将一些类路径错误全部进行了修正。 另外，需要自己在类路径里，放spring-context.jar和spring-beans.jar包。
使用Poi读取大数据量excel的方法-Java代码类资源
11-01
使用Poi读取大数据量excel的方法 支持2003和2007的版本 使用Poi读取大数据量excel的方法 支持2003和2007的版本
JAVA 大数据Excel POI生成导出
weixin_43969830的博客
04-12 2207
一、背景 在工作中经常会将List导出Excel，但是有时数据量很大，需要一次性导出。为防止各个系统重复造轮子，本文通过注解方式来实现Excel的普通、分片生成。 二、直接上代码 1、导入依赖 <dependency> <groupId>org.apache.poi</groupId> <artifactId>poi-ooxml</artifactId> ...
Poi读取大数据量Excel文件
yztezhl的专栏
09-30 2604
前言 最近生产环境有个老项目一直内存报警，不时的还出现内存泄漏，导致需要重启服务器，已经严重影响正常服务了。 分析 1.dump内存文件 liunx使用如下命令： ? 1 ./jmap -dump:format=b,file=heap.hprof pid 2.使用Eclipse Memory Analysis进行分析 异常如下： ? ...
POI读取大数据量的Excel文件
Jayke Lin
09-06 975
POI读取Excel文件有两种方式，一种是使用usermodel方式读取，这种方式的优势是统一接口开发，读取.xls文件的HSSFWorkbook与读取.xlsx文件的XSSFWorkbook两个类都实现了Workbook接口。另外一种是eventusermodel方式读取，这种方式比前面一种方式读取复杂很多，并且对与2003版本和2007版本的Excel处理没有统一接口，需要了解Excel的内...
POI工具--POI读写大数据量EXCEL
chouren4428的博客
06-25 762
另一篇文章http://www.cnblogs.com/tootwo2/p/8120053.html里面有xml的一些解释。 大数据量的excel一般都是.xlsx格式的，网上使用POI读写的例子比较多，但是很少提到读写非常大数据量的excel的例子，POI官网上提到XSSF有三种读写exc...
使用Apache POI根据模板生成Excel详细教程
"这篇文章主要介绍了如何使用Apache POI库根据模板导出...这种方法在处理大量结构化数据时非常有用，例如报表生成、数据导出等场景。了解和熟练运用Apache POI，能够极大地提高你在Java开发中处理Excel文件的能力。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值