最近项目中遇到了这样的需求,要实现从前端导入Excel
文件至MySQL
数据库。开始我的第一想法就是用 POI
,毕竟我之前有用过 POI
来实现这样类似的功能。不同的是 POI
是导入前端传来的 JSON
数据,而这次的需求直接传个 Excel
文件,还想着怎么把 Excel
里的数据怎么解析出来呢?这时无意间发现了 alibaba
开源的 EasyExcel
。哈哈哈,来的早不如来得巧。想着之前用 POI
解析的感觉好麻烦,所以就开始整 EasyExcel
了。
对 POI 感兴趣的可以看我这一篇博文:post请求实现excel导出下载功能
阿里是这样对 EasyExcel
定义的:
Java解析、生成Excel比较有名的框架有Apache poi、jxl。但他们都存在一个严重的问题就是非常的耗内存,poi有一套SAX模式的API可以一定程度的解决一些内存溢出的问题,但POI还是有一些缺陷,比如07版Excel解压缩以及解压后存储都是在内存中完成的,内存消耗依然很大。easyexcel重写了poi对07版Excel的解析,能够原本一个3M的excel用POI sax依然需要100M左右内存降低到几M,并且再大的excel不会出现内存溢出,03版依赖POI的sax模式。在上层做了模型转换的封装,让使用者更加简单方便。
好了,了解了 EasyExcel
相对于 POI
有这么多好处了,那我们也废话不多说,下面直接开搞了。
1、pom.xml 加上 easyexcel 的依赖
com.alibaba
easyexcel
2.1.3
2、Controller 类
package com.riemann.springbootdemo.controller;
import com.alibaba.excel.EasyExcel;
import com.alibaba.excel.ExcelReader;
import com.alibaba.excel.read.metadata.ReadSheet;
import com.riemann.springbootdemo.listener.UploadEasyExcelListener;
import com.riemann.springbootdemo.model.ReturnT;
import com.riemann.springbootdemo.model.UploadEasyExcelData;
import com.riemann.springbootdemo.service.UploadEasyExcelService;
import io.swagger.annotations.Api;
import io.swagger.annotations.ApiImplicitParam;
import io.swagger.annotations.ApiOperation;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.http.HttpStatus;
import org.springframework.http.ResponseEntity;
import org.springframework.web.bind.annotation.PostMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;
import org.springframework.web.multipart.MultipartFile;
import java.io.Closeable;
import java.io.IOException;
import java.io.InputStream;
/**
-
@author riemann
-
@date 2019/12/19 22:10
*/
@RestController
public class UploadEasyExcelController {
private static final Logger LOGGER = LoggerFactory.getLogger(UploadEasyExcelController.class);
@Autowired
private UploadEasyExcelService ueeService;
@PostMapping(value = “/uploadEasyExcel”,produces = “application/json;charset=UTF-8”)
public ResponseEntity<ReturnT> UploadEasyExcel(@RequestParam(value = “serviceFile”) MultipartFile serviceFile) {
if (serviceFile == null) {
return new ResponseEntity<>(new ReturnT<>(ReturnT.BAD_REQUEST, “Params can not be null”), HttpStatus.BAD_REQUEST);
}
ExcelReader excelReader = null;
InputStream in = null;
try {
in = serviceFile.getInputStream();
excelReader = EasyExcel.read(in, UploadEasyExcelData.class,
new UploadEasyExcelListener(ueeService)).build();
ReadSheet readSheet = EasyExcel.readSheet(0).build();
excelReader.read(readSheet);
} catch (IOException ex) {
LOGGER.error(“import excel to db fail”, ex);
} finally {
close(in);
// 这里一定别忘记关闭,读的时候会创建临时文件,到时磁盘会崩
if (excelReader != null) {
excelReader.finish();
}
}
return new ResponseEntity<>(new ReturnT<>(“upload easyexcel success”), HttpStatus.OK);
}
private void close(Closeable closeable) {
if (closeable != null) {
try {
closeable.close();
} catch (IOException e) {
LOGGER.error(“Close io stream error”, e);
}
}
}
}
(@RequestParam(value = “serviceFile”) MultipartFile serviceFile)
这里上传 Excel
文件用的是 MultipartFile
3、实体类 UploadEasyExcelData
package com.riemann.springbootdemo.model;
import com.alibaba.excel.annotation.ExcelProperty;
import lombok.Data;
import lombok.Getter;
import lombok.NoArgsConstructor;
import lombok.Setter;
/**
-
@author riemann
-
@date 2019/12/19 23:08
*/
@NoArgsConstructor
@Data
@Getter
@Setter
public class UploadEasyExcelData {
@ExcelProperty(value = “name”, index = 0)
private String name;
@ExcelProperty(value = “sex”, index = 1)
private String sex;
@ExcelProperty(value = “age”, index = 2)
private Integer age;
@ExcelProperty(value = “address”, index = 3)
private String address;
@ExcelProperty(value = “phone”, index = 4)
private String phone;
}
这里的实体类是是与上传的 Excel
的信息相对应,这里也用了 lombok
,lombok
能通过注解的方式,在编译时自动为属性生成构造器、getter/setter、equals、hashcode、toString
方法。出现的神奇就是在源码中没有getter
和setter
方法,但是在编译生成的字节码文件中有getter
和setter
方法。这样就省去了手动重建这些代码的麻烦,使代码看起来更简洁些。
这是它的 maven
依赖
org.projectlombok
lombok
true
4、监听类 UploadEasyExcelListener
EasyExcel.read(in, UploadEasyExcelData.class,
new UploadEasyExcelListener(ueeService)).build();
注意,EasyExcel
这里的 read
函数,除了传流、实体类还有监听类。
package com.riemann.springbootdemo.listener;
import com.alibaba.excel.context.AnalysisContext;
import com.alibaba.excel.event.AnalysisEventListener;
import com.riemann.springbootdemo.model.UploadEasyExcelData;
import com.riemann.springbootdemo.service.UploadEasyExcelService;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import org.springframework.beans.factory.annotation.Autowired;
import java.util.ArrayList;
import java.util.List;
/**
-
上传Excel的监听类
-
@author riemann
-
@date 2019/12/19 23:26
*/
public class UploadEasyExcelListener extends AnalysisEventListener {
private static final Logger LOGGER = LoggerFactory.getLogger(UploadEasyExcelListener.class);
// 每隔1000条存储数据库,然后清理list,方便内存回收
private static final int BATCH_COUNT = 1000;
// 存储解析excel条数
private int count = 0;
@Autowired
private UploadEasyExcelService ueeService;
List ueeDatas = new ArrayList<>();
public UploadEasyExcelListener(UploadEasyExcelService ueeService) {
super();
this.ueeService = ueeService;
}
@Override
public void invoke(UploadEasyExcelData ueeData, AnalysisContext analysisContext) {
if (LOGGER.isDebugEnabled()) {
LOGGER.debug(“One record was Parsed, uploadEasyExcelData:{}”, ueeData);
}
count += 1;
ueeDatas.add(ueeData);
if (ueeDatas.size() >= BATCH_COUNT) {
ueeService.saveEasyExcelMappingData(ueeDatas);
ueeDatas.clear();
}
}
@Override
public void doAfterAllAnalysed(AnalysisContext analysisContext) {
ueeService.saveEasyExcelMappingData(ueeDatas);
LOGGER.info(“all excel data parsed, count:{}”, count);
}
}
5、接口、实现类、Dao层
比较简单我就直接放了
UploadEasyExcelService.java
package com.riemann.springbootdemo.service;
import com.riemann.springbootdemo.model.UploadEasyExcelData;
import java.util.List;
/**
-
@author riemann
-
@date 2019/12/19 23:31
*/
public interface UploadEasyExcelService {
/**
-
通过easy excel上传excel数据至mysql
-
@param ueeDatas
*/
自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。
深知大多数Java工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!
因此收集整理了一份《2024年Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。
既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,真正体系化!
由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!
如果你觉得这些内容对你有帮助,可以扫码获取!!(备注Java获取)
最后
金三银四马上就到了,希望大家能好好学习一下这些技术点
学习视频:
大厂面试真题:
《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!
伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,真正体系化!**
由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!
如果你觉得这些内容对你有帮助,可以扫码获取!!(备注Java获取)
最后
金三银四马上就到了,希望大家能好好学习一下这些技术点
学习视频:
[外链图片转存中…(img-rtxe8xxV-1713415620329)]
大厂面试真题:
[外链图片转存中…(img-ISlbMbsL-1713415620329)]
《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!