java批量文件打包成压缩成zip下载和大量数据导出excel时的处理方法_java 导出多文件数据并打成zip报 优化时间方案(1)

    try {
        // 获取客户端浏览器的类型
        String agent = request.getHeader("User-Agent");
        // 对文件名重新编码
        String encodingFileName = FileDownloadUtils.encodeDownloadFilename(fileName, agent);
        // 告诉客户端允许断点续传多线程连接下载
        response.setHeader("Accept-Ranges", "bytes");
        //文件后缀
        response.setContentType("application/vnd.ms-excel;charset=UTF-8");
        response.setHeader("Content-Disposition", "attachment; filename=" + encodingFileName);
    } catch (IOException e) {
        logger.error(Thread.currentThread().getStackTrace()[1].getMethodName() +"发生的异常是: ",e);
        throw new RuntimeException(e);
    }
}

/\*\*

* 设置下载zip的响应头信息
* @param response
* @param fileName 文件名
* @param request
* @throws IOException
* @author zgd
* @time 2018年6月25日11:47:07
*/
public static void setZipDownLoadHeadInfo(HttpServletResponse response, HttpServletRequest request, String fileName) throws IOException {
// 获取客户端浏览器的类型
String agent = request.getHeader(“User-Agent”);
response.setContentType("application/octet-stream ");
// 表示不能用浏览器直接打开
response.setHeader(“Connection”, “close”);
// 告诉客户端允许断点续传多线程连接下载
response.setHeader(“Accept-Ranges”, “bytes”);
// 对文件名重新编码
String encodingFileName = FileDownloadUtils.encodeDownloadFilename(fileName, agent);
response.setHeader(“Content-Disposition”, “attachment; filename=” + encodingFileName);
}

}

#### 1.控制层接收参数

/**
* 导出商家订单数据列表的excel文件
*
* @param request
* @author zgd
* @time 2018年6月5日14:47:21
*/
@RequestMapping(value = “/exportStoreOrderList”)
public void exportStoreOrderList(HttpServletRequest request, HttpServletResponse response) {
/*
* 从service层获取List的数据,此处省略
*/
List<Map<String, Object>> list = data;

    //导出excel
    // 创建Excel文件,每个excel限制10000条数据,超过则打包zip
    int size = 10000;
    //每次缓存1000条到内存，其余写到磁盘
    int rowCache = 1000;
    String fileName = "商家订单数据-" + DateUtils.getDateWx();
    // 创建Excel文件,每个excel限制10000条数据,超过则打包zip
    int size = 10000;
    //每次缓存1000条到内存，其余写到磁盘
    int rowCache = 1000;
    String fileName = "商家订单数据-" + DateUtils.getDateWx();
    //导出excel
    try {
        //excel文件个数
        int n = list.size() / size + 1;
        if (list != null) {
            SXSSFWorkbook workbook = getStoreOrderExcel(list, rowCache);
            if (n == 1) {
                //下载单个excle
                fileName = fileName + ".xls";
                FileDownloadUtils.downloadExcel(request, response, fileName, workbook);
            } else {
                fileName = "批量" + fileName + ".zip";
                String realPath = request.getSession().getServletContext().getRealPath("WEB-INF");
                //创建临时文件夹保存excel
                String tempDir = realPath + "/tempDir/" + DateUtils.getDateWx();
                List<File> files = getStoreOrderExcels(tempDir, size, list, rowCache);
                String zipPath = tempDir + "\\" + fileName;
                //下载zip
                FileDownloadUtils.downloadZip(request, response, fileName, files, zipPath);
                //删除tempDir文件夹和其中的excel和zip文件
                boolean b = FileDownloadUtils.deleteDir(new File(realPath + "\\tempDir"));
                if (!b) {
                    throw new RuntimeException("tempDir文件夹及其中的临时Excel和zip文件删除失败");
                }
            }
        }
    }catch (Exception e) {
        try {
            if (!response.isCommitted()) {
                response.setContentType("text/html;charset=utf-8");
                response.setHeader("Content-Disposition", "");
                String html = FileDownloadUtils.getErrorHtml("下载失败");
                response.getOutputStream().write(html.getBytes("UTF-8"));
            }
        } catch (IOException e1) {
            e1.printStackTrace();
        }
    }
}

#### 2. getStoreOrderExcel方法解析

/**
* 将数据库查出来的商家订单数据,创建成excel
* @param list 商家订单数据
* @param rowCache 缓冲的行数
* @return
*/
private SXSSFWorkbook getStoreOrderExcel(List<Map<String, Object>> list, int rowCache) {
//如果rowCache是1000,就是每次读取1000条数据到缓存中
SXSSFWorkbook workbook = new SXSSFWorkbook(rowCache);
/**
…设置行,列,塞入数据
**/
return workbook;
}

##### 2.1 这里分成两条线: 下载excel和下载zip


##### 2.2 下载excel支线


###### 2.2.1 downloadExcel方法解析

/**
* 下载excel
*
* @param request
* @param response
* @param fileName
* @param workbook
* @throws Exception
* @author zgd
* @time 2018年6月25日11:47:07
*/
private void downloadExcel(HttpServletRequest request, HttpServletResponse response, String fileName, SXSSFWorkbook workbook) {
//一个流两个头
//设置下载excel的头信息
FileDownloadUtils.setExcelHeadInfo(response, request, fileName);

    // 写出文件
    ServletOutputStream os = null;
    try {
        os = response.getOutputStream();
        workbook.write(os);
    } catch (IOException e) {
        logger.error(Thread.currentThread().getStackTrace()[1].getMethodName() + "发生的异常是: ", e);
        throw new RuntimeException(e);
    } finally {
        try {
            if (os != null) {
                os.flush();
                os.close();
            }
            if (workbook != null) {
                workbook.close();
            }
        } catch (Exception e1) {
            logger.error(Thread.currentThread().getStackTrace()[1].getMethodName() + "发生的异常是: ", e1);
            throw new RuntimeException(e1);
        }
    }
}

下载excel支线完毕


##### 2.3 下载zip支线


###### 2.3.1 getStoreOrderExcels方法解析,先将大量数据转化成批量的excel临时文件

/**
* 将数据转成多个excel文件放在项目中
*
* @param tempDir
* @param size 每个excel的数据的行数
* @param list 数据
* @param rowCache 下载时缓存的行数
* @throws Exception
* @author zgd
* @time 2018年6月25日11:47:07
*/
private List getStoreOrderExcels( String tempDir, int size, List<Map<String, Object>> list, int rowCache) throws Exception {
//excel文件个数
int n = list.size() / size + 1;
FileDownloadUtils.createFile(tempDir);
List files = new ArrayList(); //声明一个集合，用来存放多个Excel文件路径及名称

    for (int i = 0; i < n; i++) {
        int max = Math.min((i + 1) * size, list.size());
        //避免将需要合并的单元格拆分成两个表 , 如果最后的一条主订单数据等于下一条数据,max+1
        while (max < list.size() - 1 && list.get(max).get("orderNo").equals(list.get(max + 1).get("orderNo"))) {
            max++;
        }
        List<Map<String, Object>> partList = list.subList(i * size, max);
        SXSSFWorkbook wb = getStoreOrderExcel(partList, rowCache);
        //生成一个excel
        String path = tempDir + "\\商家订单数据-" + (i + 1) + ".xlsx";
        generateExcelToPath(wb, path);
        //excel添加到files中
        files.add(new File(path));
    }
    return files;
}

###### 2.3.1.1 generateExcelToPath方法,将生成excel到指定路径

/**
* 生成excel到指定路径
* @param wb
* @param path
* @throws Exception
*/
private void generateExcelToPath(SXSSFWorkbook wb, String path) throws Exception {
FileOutputStream fos = null;
try {
fos = new FileOutputStream(path);
wb.write(fos);
} finally {
if (fos != null) {
fos.flush();
fos.close();
}
if (wb != null) {
wb.close();
}
}
}

###### 2.3.2 downloadZip方法解析,打包下载zip

/**
* 将批量文件打包下载成zip
* @param request
* @param response
* @param zipName 下载的zip名
* @param files 要打包的批量文件
* @param zipPath 生成的zip路径
* @throws Exception
*/
private void downloadZip(HttpServletRequest request, HttpServletResponse response, String zipName, List files, String zipPath)throws Exception {
File srcfile[] = new File[files.size()];
File zip = new File(zipPath);
for (int i = 0; i < files.size(); i++) {
srcfile[i] = files.get(i);
}
//生成.zip文件;
FileInputStream inStream = null;
ServletOutputStream os = null;
try {
//设置下载zip的头信息
FileDownloadUtils.setZipDownLoadHeadInfo(response, request, zipName);
os = response.getOutputStream();
FileDownloadUtils.ZipFiles(srcfile, zip);
inStream = new FileInputStream(zip);
byte[] buf = new byte[4096];
int readLength;
while (((readLength = inStream.read(buf)) != -1)) {
os.write(buf, 0, readLength);
}
} finally {
if (inStream != null) {
inStream.close();
}
if (os != null) {
os.flush();
os.close();
}
}
}

zip下载支线完毕


#### 3.附 打成zip包


直接用工具类

/**
* //压缩文件
* @param srcfile 要压缩的文件数组
* @param zipfile 生成的zip文件对象
*/
public static void ZipFiles(java.io.File[] srcfile, File zipfile) throws Exception {
byte[] buf = new byte[1024];
FileOutputStream fos = new FileOutputStream(zipfile);
ZipOutputStream out = new ZipOutputStream(fos);
for (int i = 0; i < srcfile.length; i++) {
FileInputStream in = new FileInputStream(srcfile[i]);
out.putNextEntry(new ZipEntry(srcfile[i].getName()));
int len;
while ((len = in.read(buf)) > 0) {
out.write(buf, 0, len);
}
out.closeEntry();
in.close();
}
out.close();
fos.flush();
fos.close();
}

![img](https://img-blog.csdnimg.cn/img_convert/399394e26fb753613ccb895d3eb54902.png)
![img](https://img-blog.csdnimg.cn/img_convert/a1ced1c3db80ac9c5d2651c3d5941152.png)

**网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。**

**[需要这份系统化资料的朋友，可以戳这里获取](https://bbs.csdn.net/topics/618545628)**


**一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**

fos.close();
    }

[外链图片转存中…(img-IEamgTxM-1714236953163)]
[外链图片转存中…(img-vXmAZkkq-1714236953163)]

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！