Excel数据导入数据库(Java)

最新推荐文章于 2022-12-20 21:32:50 发布

LXH-404

最新推荐文章于 2022-12-20 21:32:50 发布

阅读量2k

点赞数 2

分类专栏： Java 文章标签：数据库 intellij idea java excel

本文链接：https://blog.csdn.net/AKALXH/article/details/109800379

版权

Java 专栏收录该内容

16 篇文章 1 订阅

订阅专栏

Excel 文件数据导入数据库

首先说明下读写Excel三种常用的技术:
  1. POI : 效率高,操作相对JXL复杂,支持公式,宏,图像图表,一些企业应用上会比较实用.能够修饰单元格属性.字体数字日期操作.
  2. FASTEXCEL: 不可操作样式,推荐简单的导入,速度快.
  3. JXL : 效率低,简单.部分支持.能够修饰单元格属性,但没有POI强大.同样支持字体数字日期操作.

本次演示的是使用POI进行导入

为了快速搭建使用SpringBoot,先导入相关Jar包.

<!-- POI -->
        <dependency>
            <groupId>org.apache.poi</groupId>
            <artifactId>poi</artifactId>
            <version>3.8</version>
            <exclusions>
                <exclusion>
                    <artifactId>commons-codec</artifactId>
                    <groupId>commons-codec</groupId>
                </exclusion>
            </exclusions>
        </dependency>
        <dependency>
            <groupId>org.apache.poi</groupId>
            <artifactId>poi-ooxml</artifactId>
            <version>3.8</version>
        </dependency>
        .....省略相关数据库驱动.

大体流程 :

1.前端页面文件提交按钮,把需要导入的Excel文件提交上去.
2.后端处理器接收后对文件进行读取,并分析信息.然后把文件中的每一行封装为一个对象,添加进入list集合中.
3.(可省略)把封装好的list集合存入缓存中(Redis),把提取出来的数据相应给前端页面,给操作者检查.其中数据包含分析数据,提示哪里可能出现遗漏数据.当操作者缺认后,点击添加,则将缓存中数据取出对应存入数据库中.
最关键的一步还是在提取数据环节(这里可能会遇到空指针异常 , 就需要处理.),需要保证精确的提取出数据,防止遗漏.

上代码(关键部分代: 提取数据)

    /**
 * 处理Excel文件数据,打包成List对象集合
 * @param file Excel数据文件
 * @return
 */
public static (打包对象) readExcel(MultipartFile file){

    //============准备工作,相关参数,也可创建一个配置类,来封装一下参数.
    int page = 页数;     //页数 
    int col = 列数;       //列 
    int rows = 0;      //行数
    String msg = "非常流畅,无失误!"; //错误消息
    int num = 0;        //实际处理多少条数据
    int num1= 0;       //完整无跳转处理多少页
    int num2= 0;       //处理到多少页
    List<String> erNum = new ArrayList<>(); //记录哪个点进行跳转,触发自动跳转次数
    List<Shop> list = new ArrayList<>(); //封装后的对象集合
    实体对象 object = null;   // 根据Excel数据创建的实体类
    long endTime = 0;     //结束时间
    long startTime = 0;   //开始时间

    try{
        log.info("即将处理文件:{}",file.getOriginalFilename());
        InputStream is = file.getInputStream(); //获取文件流信息
        Workbook wb = new XSSFWorkbook(is);
        Sheet sheet = null;                     //页对象
        startTime = System.currentTimeMillis(); //计时开始(性能检测)
      //======开始读取===========
        for(int k = 0; k < page; k++){  //循环每一页

            sheet = wb.getSheetAt(k);
            //rows = sheet.getPhysicalNumberOfRows()-1;  //获取物理行数-1 减去标题一栏
            rows = sheet.getLastRowNum();                //最后的行号
            System.out.println("当前页数:"+ (k+1) +" 本页行数:"+ (rows-1));
            num2++;
            //一下两行代码业务需要可添加: 比如可能有跨行的列,多行使用同一个列的情况下,举个例子:广东省下深圳,佛山.....
            String temp = "暂无";         //临时属性变量
            String temp1 = "暂无";        //临时属性变量
            for(int j = 0;j < rows;j++){  //循环每一行

                log.info("当前行数:{}",j);
                //判断是否为空列,空行.解决读取出来的行数与实际有数据的行数不符,如果为空则自动跳过本页,防止空指针异常.并且记录下.
                if(!StringUtils.hasText(sheet.getRow(j).getCell(0).toString()) &&
                   !StringUtils.hasText(sheet.getRow(j).getCell(1).toString()) &&
                   !StringUtils.hasText(sheet.getRow(j).getCell(2).toString()) ||
                    sheet.getRow(j).getCell(2).getCellType() == HSSFCell.CELL_TYPE_BLANK &&  //第3个属性为空
                    sheet.getRow(j).getCell(3).getCellType() == HSSFCell.CELL_TYPE_BLANK){   //第4个属性为空

                    //遇到无数据的行时,自动下一页.
                    log.debug("非正常退出,截止到"+j+"行,遇到空数据,自动下一页!");
                    erNum.add(k+1+"页-"+j+"行");
                    break;
                }

                shop = new Shop();
                for(int i = 0; i < col; i++){  //循环每一列
                    System.out.println(sheet.getRow(j).getCell(i).toString());//getStringCellValue());
                    switch (i){
                        case 0:  //设置属性
                            if(sheet.getRow(j).getCell(i).toString() != null &&
                                    sheet.getRow(j).getCell(i).getCellType() != HSSFCell.CELL_TYPE_BLANK ){  //判断如果有属性的话就把存为临时变量
                                temp = sheet.getRow(j).getCell(i).toString();
                                shop.setProvince(sheet.getRow(j).getCell(i).toString()); //可替换代码(插入属性)
                            }else{                                                 //否则没有的话就用之前的临时变量代替
                                shop.setProvince(temp);
                            }
                            break;
                        case 1: //设置建材属性
                            if(sheet.getRow(j).getCell(i).toString() != null &&
                                    sheet.getRow(j).getCell(i).getCellType() != HSSFCell.CELL_TYPE_BLANK){
                                temp1 = sheet.getRow(j).getCell(i).toString();
                                shop.setBazaar(sheet.getRow(j).getCell(i).toString()); //可替换代码(插入属性)
                            }else{
                                shop.setBazaar(temp1); //可替换代码(插入属性)
                            }
                            break;
                        case 2: //设置属性 
                            shop.setStore(sheet.getRow(j).getCell(i).toString());//可替换代码(插入属性)
                            break;
                        case 3: //设置属性
                            shop.setAddress(sheet.getRow(j).getCell(i).toString());//可替换代码(插入属性)
                            break; 
                        case 4: //设置属性
                            shop.setPhone(sheet.getRow(j).getCell(i).toString()); //可替换代码(插入属性)
                            break;
                        case 5: //设置属性
                            shop.setResult(sheet.getRow(j).getCell(i).toString());//可替换代码(插入属性)
                            break;
                    }
                }
                list.add(shop); //添加一个对象,
                System.out.println("-------------------------------------------------");
                num ++;
                if(( j + 1) == rows){
                    System.out.println("处理完本页数据:截止" + j + "行,即将处理下一页数据!");
                    num1++;
                }
            }
        }
        endTime = System.currentTimeMillis(); //计时结束
    }catch (Exception e){
        log.error("错误 ExcelHandle => readExcel() : {}",e.toString());
        msg = "错误 ExcelHandle => readExcel() : " + e.toString();
    }finally{
        System.out.println("=========================");
        System.out.println("          读取结果");
        System.out.println("=========================");
        System.out.println("实际处理数据条数为:" + num);
        System.out.println("完整无跳转处理页数:"+ num1);
        System.out.println("总共处理页数:"+num2);
        System.out.println("-------------------------");
        System.out.println("自动触发跳转次数:" + erNum.size());
        erNum.stream().forEach(t -> System.out.println(t));
        System.out.println("-------------------------");
        System.out.println("扫描时间：" + (endTime - startTime) + "ms"); //输出程序运行时间
        System.out.println("错误信息:" + msg);

        //封装数据并返回
        analyse = new Analyse();
        analyse.setNum(num);
        analyse.setNum1(num1);
        analyse.setNum2(num2);
        analyse.setErNum(erNum);
        analyse.setMsg(msg);
        analyse.setList(list);
    }
    return analyse;
}

控制台输出结果信息:
在这里插入图片描述