poi读取百万级数据

最新推荐文章于 2024-08-18 20:08:00 发布

weixin_44931525

最新推荐文章于 2024-08-18 20:08:00 发布

阅读量1.6k

点赞数

文章标签： java poi excel

本文链接：https://blog.csdn.net/weixin_44931525/article/details/104651819

版权

POI

POI：POI是创建和维护操作各种符合Office Open XML（OOXML）标准和微软的OLE 2 复合文档格式（OLE2）的Java API”

在这里插入图片描述

加载并读取Excel时，，由于不同的运行环境可能会造成内存不足甚至OOM异常。
poi读取Excel有两种模式，一种是用户模式，一种是sax事件驱动模式。用户模式是通过一次性的将所有数据加载到内存中再去解析每个单元格内容。当Excel数据量比较大时当数据量过大时会出现内存溢出的问题。事件模式：它逐行扫描文档，一边扫描一边解析。由于应用程序只是在读取时检查数据，因此不需要将数据存储在内存中。

读取大数据量文件方法：

使用StreamingReader

1、引入jar包
<dependency>
   <groupId>com.monitorjbl</groupId>
   <artifactId>xlsx-streamer</artifactId>
   <version>1.2.1</version>
</dependency>
2、
FileInputStream fileInputStream = new FileInputStream(String path);
            Workbook wb = StreamingReader.builder()
                    .rowCacheSize(100)//读取到内存中的行数，默认10
                    .bufferSize(4096)//读取资源，缓存到内存的字节大小。默认1024
                    .open(fileInputStream);//打开资源。只能是xlsx文件
            Sheet