使用jxl导出大数据量EXCEL时内存溢出的解决办法

2019独角兽企业重金招聘Python工程师标准>>>

POI或者JXL在导出大量数据的时候，由于它们将每一个单元格生都成一个Cell对象，所以很容易导致内存溢出。

1、通过jx1最新版本的采用临时文件写入EXCEL功能，设定临时文件的位置，可以有效的避免内存溢出：

           wbSetting.setUseTemporaryFileDuringWrite(true);   
           wbSetting.setTemporaryFileDuringWriteDirectory(new File(excelPath));//临时文件夹的位置

2、EXCEL获取的list集合先读取数据总行数，再通过ROWNUM进行控制，设定每次读取多少行数据，比如一个List设定为50000；

            WorkbookSettings wbSetting = new WorkbookSettings();   
            wbSetting.setUseTemporaryFileDuringWrite(true);   
            wbSetting.setTemporaryFileDuringWriteDirectory(new File(excelPath));//临时文件夹的位置
            workbook = Workbook.createWorkbook(new File(fullPath),wbSetting);
            int returnCount=0;
            if(null!=pager)
            {
                returnCount = BrasDatabase.getReturnCount(pager.getStartTime(),
                        pager.getEndTime(), pager);
            }

            if (returnCount > 0) {    
                pager.setPageSize(50000);
                pager.setTotalRows(returnCount);// 获取总行数
                pager.setNewTotalPages(pager.getTotalRows()); // 总页数
                for (int i = 1; i <= pager.getTotalPages(); i++) {
                    pager.setCurrentPage(i); // 当前页面d
                    List<BrasAuth> list = BrasDatabase
                            .getBrasAuthResultByIpToExcelList(pager
                                    .getStartTime(), pager.getEndTime(), pager);
                    this.createExcel(list,excelFilePath);
                    list.clear();
                }
            }


3、在写入EXCEL的时候，将读取的LIST分割，每50000条数据生成一个EXCEL的sheet（一个sheet最多能存储60000多行数据），再写入，写入的时候，如果设置了采用临时文件写入的话，jx1会自动采用生成临时文件的方式写入EXCEL：

       for(int i=1;i<=list.size();i++)
        {
            if(i%50000==0)
            {
                sheetName=format.format(new Date());
                toExcel(list.subList(reNum, i),sheetName);
                reNum=i;
            }
        }

------------------------------------------------------------------------------------------------------------------------------

写文本格式的Excel文件,而不是用POI等生成二进制的文件, 可以避免创建大批量的对象时内存溢出.代码如下可以作为参考: 
第一种格式,CSV,最简单的,格式最差,最基本的行列,不能合并,不能设置着色, 
第二种,HTML格式的,如:"<TABLE>....</TABLE>"这样的文本,后辍名改为XLS就可以了,可以设置跨行列的合并,可以着色,图片没试过,估计是可以的,还可以设置单元格对齐,单元格的格式等

public static boolean createExcelFileByStream(String path, List list) {  
        try {  
         //定义表头 
         String userxlsinfo = "序号\t用户ID\t姓名\t手机\t留言信息";  
            File file = new File("c:\\streamExcel.xls");  
            if (file.isFile()) {  
                file.mkdir();  
            }  
            FileOutputStream out = new FileOutputStream(file);  
            OutputStreamWriter osw = new OutputStreamWriter(out, "GB2312");  
            BufferedWriter bw = new BufferedWriter(osw);  
            // 创建表头   
            String sheader = userxlsinfo;  
            sheader += "\r\n";  
            bw.write(sheader);  
            if (list != null) {  
             // List list 此处可以遍历list对象 
                for (int i = 0; i < 5; i++) {  
                    StringBuffer mess = new StringBuffer();  
                    // 用户信息   
                    mess.append((i + 1) + "\t");  
                    mess.append((i + 1) + "\t");  
                    mess.append((i + 1) + "\t");  
                    mess.append((i + 1) + "\t");  
                    mess.append((i + 1) + "\t");  
                    
                    mess.append("\r\n");      
                    System.out.println(i);  
                    bw.write(mess.toString());  
                }  
            }  
            bw.close();  
            osw.close();  
            out.close();  
            return true;  
        } catch (FileNotFoundException e) {  
            e.printStackTrace();  
        } catch (IOException e) {  
            e.printStackTrace();  
        } 
        return false;  
    }  



注意:表头部分和数据部分的间隔一定要用'\t ' 如果改用','号则导出文件用excel打开展示会有问题

转载于:https://my.oschina.net/u/1582930/blog/1605113