excel导入

于 2024-08-14 14:10:23 发布
阅读量304 收藏 3
点赞数 3
分类专栏： NOTES 文章标签： java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43049583/article/details/141188662
版权

Excel数据导入

使用easyexcel和hutool-poi实现excel导入

1、pom依赖

        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>easyexcel</artifactId>
            <version>2.2.6</version>
        </dependency>
        
        <dependency>
            <groupId>cn.hutool</groupId>
            <artifactId>hutool-poi</artifactId>
            <version>5.8.21</version>
        </dependency>
        
        <dependency>
            <groupId>org.apache.poi</groupId>
            <artifactId>poi</artifactId>
            <version>4.1.2</version>
        </dependency>
        
        <dependency>
            <groupId>org.apache.poi</groupId>
            <artifactId>poi-ooxml</artifactId>
            <version>4.1.2</version>
        </dependency>
        
        <dependency>
            <groupId>org.apache.poi</groupId>
            <artifactId>poi-ooxml-schemas</artifactId>
            <version>4.1.2</version>
        </dependency>

2、导入流程描述

在这里插入图片描述

2.1、读取excel

读取excel中的源数据

2.2、数据校验
2.2.1 对源数据进行数据校验
2.2.2 将满足校验规则的数据放入normalList中
2.2.3 将不满足校验规则的数据放入errorList中
2.2.4 将最后的成功、失败数量结果放入importResult中
2.2.5 将校验结果返回给前端

将校验后的数据normalList、errorList、importResult返回给前端，如果存在错误数据（及errorList不为空）则提示用户更改，用户更改后重新对更改后的excel文件执行数据校验操作，直达所有的数据都是正确数据（及errorList为空）则执行数据入库操作

2.3 数据入库

将数据校验完成后的normalList拿到（此时的errorList一定是空的），直接进行入库操作，如果存在入库失败的数据则放入errorList中直接返给前端展示出来错误原因，不另外做其他操作

3、代码示例

3.1 excel导入返回VO
/**
 * @author: yc
 * @des:  excel导入vo
 * @date: 2024/07/17 20:57
 */
@Data
public class ExcelImportVO {

    @ApiModelProperty("错误的数据")
    private List<?> errorList;

    @ApiModelProperty("正常的数据")
    private List<?> normalList;

    @ApiModelProperty("导入结果")
    private String importResult;

}
3.2 用户导入模板
/**
 * @author: yc
 * @des:  用户导入模板
 * @date: 2024/07/18 13:35
 */
@Data
public class UserImportTemplate {

    /**
     * 行号
     */
    private Integer rowNumber;

    /**
     * 姓名
     */
    @ExcelProperty("姓名")
    @ColumnWidth(20)
    private String realName;

    /**
     * 手机号
     */
    @ExcelProperty("手机号")
    @ColumnWidth(20)
    private String mobile;

    /**
     * 组织名称
     */
    @ExcelProperty("组织名称")
    @ColumnWidth(20)
    private String organizeName;

    private String organizeId;

    /**
     * 部门名称
     */
    @ExcelProperty("部门名称")
    @ColumnWidth(20)
    private String departmentName;

    private String departmentId;

    /**
     * 校验信息
     */
    private String verifyMsg;

    /**
     * @author: yc
     * @des:  校验
     * @date: 2024/07/18 14:00
     */
    public void verify(List<BaseDepartment> departmenList, BaseDepartService baseDepartService){
        StringBuilder msg = new StringBuilder();
        // 姓名
        if(StringUtils.isBlank(this.realName)){
            msg.append("姓名不能为空");
        }
        // 手机号
        if(StringUtils.isBlank(this.mobile)){
            msg.append("姓名不能为空");
        }else{
            if (!Pattern.compile("^[1][3,4,5,7,8][0-9]{9}$").matcher(this.mobile).matches()) {
                msg.append("手机号不正确");
            }
        }
        // 组织名称
        if(StringUtils.isBlank(this.organizeName)){
            msg.append("组织名称不能为空");
        }
        // 部门名称
        if(StringUtils.isBlank(this.departmentName)){
            msg.append("部门名称不能为空");
        }else{
            BaseDepartment department = baseDepartService.getDepartmentByName(this.departmentName, departmenList);
            if(Objects.isNull(department)){
                msg.append("部门不存在");
            }else{
                this.departmentId = department.getDepartmentId();
            }
        }
        this.verifyMsg = msg.toString();
    }

    /**
     * @author: yc
     * @des:  模板转实体
     * @date: 2024/07/18 14:09
     */
    public BaseUser template2entity(){
        BaseUser baseUser = new BaseUser();
        baseUser.setUserId(IdUtil.simpleUUID());
        baseUser.setAccount(this.mobile);
        baseUser.setPassword("8e00646ca539d84f41e085c6ee9a54ba");
        baseUser.setSecretkey("f240625eb8a38ae1");
        baseUser.setRealName(this.realName);
        baseUser.setMobile(this.mobile);
        baseUser.setOrganizeId(this.organizeId);
        baseUser.setDepartmentId(this.departmentId);
        baseUser.setDeleteMark(0);
        baseUser.setEnabledMark(1);
        baseUser.setModifyDate(new Date());
        baseUser.setCreateDate(new Date());
        return baseUser;
    }

}
3.3 excel文件数据读取、校验
    /**
     * @author: yc
     * @des:  excel导入前检验
     * @date: 2024/07/18 10:56
     */
    @Override
    public Result<ExcelImportVO> excelImportVerify(MultipartFile file) {
        ExcelImportVO excelImportVO = new ExcelImportVO();
        if(Objects.isNull(file)){
            return Result.fail(ResultCode.GLOBAL_PARAM_ERROR.getCode(),"上传文件不能为空");
        }
        String fileName = file.getOriginalFilename();
        //文件名
        String name = fileName.substring(0,fileName.lastIndexOf("."));
        //文件类型
        String type = fileName.substring(fileName.lastIndexOf("."));
        if(StringUtils.isBlank(type) || (!type.equals(".xlsx") && !type.equals(".xls"))){
            return Result.fail(ResultCode.FAILURE.getCode(),"文件名格式不正确,请上传.xlsx或.xls文件");
        }
        //判断文件名长度是否小于3，解决 临时文件 too short问题
        fileName = name.length() <= 3 ? name + (new Random().nextInt(900)+100) + type : fileName;
        // 从excel中拿到数据
        List<UserImportTemplate> dataList = new ArrayList<>();
        try {
            ExcelReader excelReader = ExcelUtil.getReader(file.getInputStream());
            List<List<Object>> excelDataList = excelReader.read(1);
            if(CollectionUtils.isEmpty(excelDataList)){
                return Result.fail(ResultCode.FAILURE.getCode(),"无数据导入");
            }
            AtomicInteger rowNumber = new AtomicInteger(1);
            excelDataList.forEach(i -> {
                Object[] rowData = i.toArray(new Object[10]);
                UserImportTemplate template = new UserImportTemplate();
                template.setRealName(null == rowData[0] ? "" : String.valueOf(rowData[0]));
                template.setMobile(null == rowData[1] ? "" : String.valueOf(rowData[1]));
                template.setOrganizeName(null == rowData[2] ? "" : String.valueOf(rowData[2]));
                template.setDepartmentName(null == rowData[3] ? "" : String.valueOf(rowData[3]));
                template.setRowNumber(rowNumber.getAndAdd(1));
                dataList.add(template);
            });
            // 数据校验
            // 部门信息
            List<BaseDepartment> departmenList = baseDepartService.list();
            dataList.forEach(i -> {
                i.verify(departmenList,baseDepartService);
            });
            StringBuilder resultMsg = new StringBuilder();
            // 正常数据
            excelImportVO.setNormalList(dataList.stream().filter(i -> StringUtils.isBlank(i.getVerifyMsg())).collect(Collectors.toList()));
            // 错误数据
            excelImportVO.setErrorList(dataList.stream().filter(i -> StringUtils.isNotBlank(i.getVerifyMsg())).collect(Collectors.toList()));
            resultMsg.append("成功" + excelImportVO.getNormalList().size() + "条");
            if(!CollectionUtils.isEmpty(excelImportVO.getErrorList())){
                resultMsg.append(",失败" + excelImportVO.getErrorList().size() + "条");
            }
            excelImportVO.setImportResult(resultMsg.toString());
        } catch (Exception e) {
            return Result.fail(ResultCode.FAILURE.getCode(),e.getMessage());
        }
        return Result.data(excelImportVO);
    }
3.4 数据入库
    /**
     * @author: yc
     * @des:  excel导入
     * @date: 2024/07/18 10:57
     */
    @Override
    public Result<ExcelImportVO> excelImport(List<UserImportTemplate> successList) {
        ExcelImportVO excelImportVO = new ExcelImportVO();
        if(CollectionUtils.isEmpty(successList)){
            return Result.fail(ResultCode.FAILURE.getCode(),"导入数据不存在");
        }
        List<UserImportTemplate> errorList = new ArrayList<>();
        for(UserImportTemplate template : successList){
            try {
                super.save(template.template2entity());
            }catch (Exception e){
                template.setVerifyMsg("当前数据已存在");
                errorList.add(template);
            }
        }
        successList.removeAll(errorList);
        excelImportVO.setNormalList(successList);
        excelImportVO.setErrorList(errorList);
        StringBuilder resultMsg = new StringBuilder();
        resultMsg.append("成功" + excelImportVO.getNormalList().size() + "条");
        if(!CollectionUtils.isEmpty(excelImportVO.getErrorList())){
            resultMsg.append(",失败" + excelImportVO.getErrorList().size() + "条");
        }
        excelImportVO.setImportResult(resultMsg.toString());
        return Result.data(excelImportVO);
    }
BOSSYUCHAO
关注
专栏目录
易语言-易语言EXCEL表导入EDB数据库
06-29
在“易语言-易语言EXCEL表导入EDB数据库”这个主题中，我们将探讨如何使用易语言处理Excel数据并将其导入到EDB（Enterprise Database，企业数据库）中。 首先，我们需要了解EDB数据库。EDB数据库通常指的是开源的...
SpringBoot+AntDesignVue实现excel导入功能
07-20
SpringBoot+AntDesignVue 实现 Excel 导入功能 在本篇文章中，我们将介绍如何使用 SpringBoot 和 AntDesignVue 实现 Excel 导入功能。这个功能主要是使用 Ant Design Vue 中的 upload 组件来实现导入 excel 文件的...
excel表导入navicat数据库
qq_45991812的博客
10-26 3069
选中（点第一个然后按住shift选中剩余的）--》右击--》复制为--》制表符分隔值（字段名）下图为excel要导入的数据。选中后将字段粘贴到相应位置。在数据库中导入excel。如图，为待导入数据的表。
如何将Excel表导入到SQLite
最新发布
toohardp的博客
05-24 564
我是用的Office，不知道WPS能不能用。最好和等会新建连接放在一起。
Java实现Excel导入
热门推荐
我是老伯的博客
05-11 2万+
Java实现Excel导入
PLSQL从excel 导入数据
qq_46411309的博客
02-16 8502
excel数据导入到数据库： 在Excel中准备好要导入的数据。具体操作：在Excel中，把第一列设置为空列，第二列以后的列应与要导入的数据表的字段相对应。 登录PLSQL Developer，找到需要导入数据的数据库表后，点击右键–edit data，进入了编辑此表的数据对话框，并点击最左侧选中一空行。 copy Excel表中的数据记录，将数据粘贴到上步中PLSQL Developer显示的表列中。 点击PLSQL Developer中的对号按钮进行Post。 注意： 如果出现报错：variant
Excel导入txt文本数据
weixin_42548328的博客
03-26 1484
1.在Excel中依次点击【数据】->【获取数据】->【从文本】4.根据自己的文件需求设置分隔符号，我使用的例子是tab分隔的。5.选择一下自己的列数据格式，一般的使用常规就行了，结束点完成。6.根据自己的需要选择数据需要存在的位置，然后点击确定。2.在文件夹中找到自己所需的txt文件选择导入。【文件内容预览如图】3.导入向导格式设置。
easyexcel+validation excel导入导出下载
01-19
本文将深入探讨如何结合EasyExcel和Validation实现高效且准确的Excel导入导出与数据校验。 EasyExcel的优势在于其简洁的API设计和对内存的高效利用。它无需预先加载整个Excel文件到内存，而是采用流式读写，降低了...
易语言EXCEL表导入EDB数据库源码
06-01
易语言是一种专为中国人设计的编程语言，它以简体...总的来说，易语言EXCEL表导入EDB数据库的源码是一个实用的编程示例，展示了如何利用易语言进行数据处理，对于学习易语言和数据库管理的初学者来说是一份宝贵的资料。
springboot上传excel导入到数据库完整demo(后端代码)
06-08
在本项目中，我们主要探讨的是如何利用SpringBoot框架实现Excel数据的导入并将其存储到MySQL数据库中的功能。这是一个常见的需求，在数据批量处理、数据分析或者系统集成时非常有用。下面将详细讲解涉及的关键技术点...
C语言中对文件的读取操作
qq_43049583的博客
01-18 2万+
C语言文件操作
C语言用指针实现两个字符数组的连接
qq_43049583的博客
08-25 1万+
指针连接两个不同的数组
group_concat解决mybatis一对多的分页问题
qq_43049583的博客
07-27 2562
mysql一对多分页问题
使用VS2013时常遇问题及解决方法
qq_43049583的博客
08-25 1925
VS2013常见问题
lambda根据list对象中某一属性进行排序
qq_43049583的博客
05-07 1783
lambda对list排序
lambda对list去重合并
qq_43049583的博客
03-10 1568
lambda对list去重求和
tree转为list
qq_43049583的博客
06-27 1253
将树转为列表
docker安装基本开发环境
qq_43049583的博客
08-08 713
docker安装基本开发环境
数据入库处理总结
qq_43049583的博客
07-19 592
数据入库处理总结
C# WinForm Excel导入导出实战
"这篇资源是关于C# WinForm环境下如何实现Excel数据的导入与导出。文中提供了具体的源代码示例，主要涉及了利用Microsoft Office Interop库来操作Excel文件，包括将DataGridView中的数据导出到Excel以及可能的错误...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值