excel读写/导入mysql数据库

前言:这两天在做一个excel导入导出的功能,数据量为十万级,导入mysql数据库.之前很久写过但是有些遗忘,在此记录以备不时之需.

现在流程的导入excel插件有很多,jxl,jxls,poi,阿里的esayexcel,项目中是综合使用 ,本人比较青睐esayexcel,因为在特定情况下是非常方便的.

poi工具类

pom依赖
注意:无论使用什么版本 版本号必须要一致,不然在导入过程中或抛出类中方法找不到异常

<dependency>
    <groupId>org.apache.poi</groupId>
    <artifactId>poi</artifactId>
    <version>4.0.1</version>
</dependency>
<dependency>
    <groupId>org.apache.poi</groupId>
    <artifactId>poi-ooxml</artifactId>
    <version>4.0.1</version>
</dependency>

下面是我导入mysql 的代码

public class ExcelTest {
    @Autowired
    private IBaseAreaService baseBankService

    @Test
    public void readXlSX() throws Exception {
        AtomicInteger atomicInteger = new AtomicInteger(0);
        //载体
        List<BaseArea> list = new ArrayList<>();
        //开始时间
        long st = System.currentTimeMillis();
        
        org.apache.poi.ss.usermodel.Workbook excel = WorkbookUtil.createBook(new File("要读取的文件路径"));
        // 遍历所有表格 excel.getNumberOfSheets()
        for (int numSheet = 0; numSheet < excel.getNumberOfSheets(); numSheet++) {
            org.apache.poi.ss.usermodel.Sheet sheet = excel.getSheetAt(numSheet);
            System.out.println(sheet.getSheetName()); //输出该表格的名称
            if (sheet == null) {
                continue;
            }
            if(!sheet.getSheetName().equals("sheet名称")){
                continue;
            }
            //遍历所有行 sheet.getLastRowNum()
            System.out.println("总行数:"+sheet.getLastRowNum());
            for (int rowNum = 1; rowNum <= sheet.getLastRowNum(); rowNum++) {
                Row row = sheet.getRow(rowNum);
                if (row == null) {
                    continue;
                }
                BaseArea bankBranch = new BaseArea();
                //根据你的需求获取对应的列上的值
                org.apache.poi.ss.usermodel.Cell cell0 = row.getCell(0);
				// 填充对象属性
                bankBranch.setAreaName(cell0.getStringCellValue());
                org.apache.poi.ss.usermodel.Cell cell1 = row.getCell(1);
                bankBranch.setAreaCode(cell1.getStringCellValue());
                bankBranch.setParentCode(cell1.getStringCellValue());
                bankBranch.setOrderId(Long.parseLong(atomicInteger.incrementAndGet()+""));
                bankBranch.setUpdateTime(new Date());

                list.add(bankBranch);

                System.out.println(atomicInteger.toString());
            }
            long en = System.currentTimeMillis();
            list = list.stream().filter(e ->
                CommUtil.isNotEmpty(e.getAreaName())
            ).collect(Collectors.toList());
            //调用service方法填充数据库
            baseBankService.saveBatch(list);
            System.out.println("总耗时:"+(en - st));

        }

    }
}

这是一个简单的从excel填充入mysql的代码,在网上也找了很多但是都是比较麻烦的.

下面贴上使用阿里的easyexcel导出的代码

pom

  <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>easyexcel</artifactId>
            <version>2.1.4</version>
        </dependency>

easyexcel根据注解来写入excel非常方便,只需要在实体上加入相应注解就好

实体类

@Data
public class DemoData {
    @ExcelProperty("字符串标题")
    private String string;
    @ExcelProperty("日期标题")
    private Date date;
    @ExcelProperty("数字标题")
    private Double doubleData;
    /**
     * 忽略这个字段
     */
    @ExcelIgnore
    private String ignore;
}

最简单的写
写方法

/**
     * 最简单的写
     * <p>1. 创建excel对应的实体对象 参照{@link com.alibaba.easyexcel.test.demo.write.DemoData}
     * <p>2. 直接写即可
     */
    @Test
    public void simpleWrite() {
        String fileName = TestFileUtil.getPath() + "write" + System.currentTimeMillis() + ".xlsx";
        // 这里 需要指定写用哪个class去读，然后写到第一个sheet，名字为模板 然后文件流会自动关闭
        // 如果这里想使用03 则 传入excelType参数即可
        EasyExcel.write(fileName, DemoData.class).sheet("模板").doWrite(data());
    }

官方文档地址:https://github.com/alibaba/easyexcel