1.什么是Easyexcel
EasyExcel是阿里巴巴开源的一个excel处理框架,以使用简单、节省内存著称。EasyExcel能大大减少占用内存的主要原因是在解析Excel时没有将文件数据一次性全部加载到内存中,而是从磁盘上一行行读取数据,逐个解析。
官网地址:https://www.yuque.com/easyexcel/doc/write
2.easyexcel完成写操作
把java对象写到excel文件中
2.1引入相关依赖
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>easyexcel</artifactId>
<version>3.0.5</version>
</dependency>
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
</dependency>
<dependency>
<groupId>com.baomidou</groupId>
<artifactId>mybatis-plus-boot-starter</artifactId>
<version>3.5.1</version>
</dependency>
2.2 . 封装对象
@Data
@TableName("tbl_user")
public class User {
@TableId
@ExcelProperty("编号")
private int id;
@ExcelProperty("姓名")
private String name;
@ExcelProperty("年龄")
private Integer age;
}
2.3 完成写入操作
public class TestWrite {
public static void main(String[] args) {
//excel存在哪个位置
String fileName = "C:\\Users\\DELL\\IdeaProjects\\qy163-easyexcel\\qy163.xls";
// 这里 需要指定写用哪个class去写,然后写到第一个sheet,名字为模板 然后文件流会自动关闭
// 如果这里想使用03 则 传入excelType参数即可
List<ExcelDemo> data=new ArrayList<>();
data.add(new ExcelDemo(1,"李梦瑶",15,"郑州"));
data.add(new ExcelDemo(2,"姚奎",16,"北京"));
data.add(new ExcelDemo(3,"肖安康",19,"杭州"));
data.add(new ExcelDemo(4,"蔡雨新222",17,"上海"));
EasyExcel.write(fileName, ExcelDemo.class).sheet("mqc").doWrite(data);
}
}
2.4 在浏览器下载
@Controller
public class UploadController {
@GetMapping("/upload")
public void downloadFailedUsingJson(HttpServletResponse response) throws IOException {
// 这里需要设置不关闭流
List<ExcelDemo> data=new ArrayList<>();
data.add(new ExcelDemo(1,"李梦瑶",15,"郑州"));
data.add(new ExcelDemo(2,"姚奎",16,"北京"));
data.add(new ExcelDemo(3,"肖安康",19,"杭州"));
data.add(new ExcelDemo(4,"蔡雨新",17,"上海"));
upload(response,"今天放假",data);
}
}
3. easyexcel完成读操作
3.1 监听器
@Slf4j
public class UserDataListener implements ReadListener<User> {
/**
* 每隔5条存储数据库,实际使用中可以100条,然后清理list ,方便内存回收
*/
private static final int BATCH_COUNT = 100;
/**
* 缓存的数据
*/
private List<User> cachedDataList = ListUtils.newArrayListWithExpectedSize(BATCH_COUNT);
/**
* 假设这个是一个DAO,当然有业务逻辑这个也可以是一个service。当然如果不用存储这个对象没用。
*/
private UserDao userDao;
public UserDataListener() {
// 这里是demo,所以随便new一个。实际使用如果到了spring,请使用下面的有参构造函数
}
/**
* 如果使用了spring,请使用这个构造方法。每次创建Listener的时候需要把spring管理的类传进来
*
* @param userDao
*/
public UserDataListener(UserDao userDao) {
this.userDao = userDao;
}
/**
* 这个每一条数据解析都会来调用
*
* @param data one row value. Is is same as {@link AnalysisContext#readRowHolder()}
* @param context
*/
@Override
public void invoke(User data, AnalysisContext context) {
log.info("解析到一条数据:{}", JSON.toJSONString(data));
cachedDataList.add(data);
// 达到BATCH_COUNT了,需要去存储一次数据库,防止数据几万条数据在内存,容易OOM
if (cachedDataList.size() >= BATCH_COUNT) {
saveData();
// 存储完成清理 list
cachedDataList = ListUtils.newArrayListWithExpectedSize(BATCH_COUNT);
}
}
/**
* 所有数据解析完成了 都会来调用
*
* @param context 120---》100 20====》
*/
@Override
public void doAfterAllAnalysed(AnalysisContext context) {
// 这里也要保存数据,确保最后遗留的数据也存储到数据库
log.info("~~~~~~~~~~~~~~~~~~~~~~~~~");
saveData();
log.info("所有数据解析完成!");
}
/**
* 加上存储数据库
*/
private void saveData() {
log.info("{}条数据,开始存储数据库!", cachedDataList.size());
userDao.batchSave(cachedDataList);
log.info("存储数据库成功!");
}
}
3.2 mapper层
public class DemoDAO {
public void save(List<ExcelDemo> list) {
// 如果是mybatis,尽量别直接调用多次insert,自己写一个mapper里面新增一个方法batchInsert,所有数据一次性插入
System.out.println("保存数据到数据库====批量保存");
}
}
3.3 测试类
public class TestRead {
public static void main(String[] args) {
String fileName = "C:\Users\DELL\IdeaProjects\qy163-easyexcel\qy163.xls";
// 这里 需要指定读用哪个class去读,然后读取第一个sheet 文件流会自动关闭
EasyExcel.read(fileName, ExcelDemo.class, new DemoDataListener()).sheet().doRead();
}
}
结果:
4 . easyexcel完成复杂读操作
4.1 引入依赖
<!--文件上传-->
<dependency>
<groupId>commons-fileupload</groupId>
<artifactId>commons-fileupload</artifactId>
<version>1.3.3</version>
</dependency>
5.2 测试
@Controller
public class UploadController {
/**
* 文件上传
*/
@Autowired
private UserDao userDao;
@PostMapping("upload2")
@ResponseBody
public String upload2(MultipartFile file) throws IOException {
EasyExcel.read(file.getInputStream(), User.class, new UserDataListener(userDao)).sheet().doRead();
return "success";
}
}
控制台输出:
5 . easyexcel完成数据库读写操作
5.1 配置文件
spring.datasource.driver-class-name=com.mysql.cj.jdbc.Driver
spring.datasource.username=root
spring.datasource.password=123456
spring.datasource.url=jdbc:mysql:///work
server.port=8888
5.2 user层
5.3 dao层
@Mapper
public interface UserDao extends BaseMapper<User> {
void batchSave(List<User> cachedDataList);
}
5.4 监听器
5.5 创建数据库并添加数据
<mapper namespace="com.qy163easyexcel.dao.UserDao">
<insert id="batchSave">
insert into tbl_user values
<foreach collection="list" item="user" separator=",">
(#{user.id},#{user.name},#{user.age})
</foreach>
</insert>
</mapper>
5.6 controller层
开始测试: