qq_41571411的博客

原创 基于easyexcel+线程池+批量插入实现导入功能

为了提高效率，可以手工将大数据打断复制分散到多个sheet页多，就可以使用多线程来进行读取，因此采用ExecutorService。文件往往会是大文件：选择easyexcel，（相较于POI对于内存占用较少，easyexcel采用的是逐行读取）PS：单个excel，单sheet页 是104W条，256列，上限32000个字节傻瓜式换算是1G左右单个文件。新旧项目数据迁移，注意点：避免OOM以及低性能导致的耗时增加。批量写入：选择mybatis/mybatils-plus均可。