EasyExcel如何读取全部Sheet页数据方法

文章讲述了如何利用EasyExcel框架处理包含20个sheet、每sheet65535条数据的Excel文件,通过doReadAll方法读取数据,并使用EmpService接口和EmpServiceImpl中的批量JDBC插入策略提高导入效率。文中还提到了可能遇到的null报错及版本兼容问题。
摘要由CSDN通过智能技术生成

一、需求描述

Excel表格里面大约有20个sheet页,每个sheet页65535条数据,需要读取全部数据,并导入至数据库。

找了好多种方式,EasyExcel比较符合,下面看代码。

二、实现方式 采用EasyExcel框架的doReadAll()方法

 1、DemoController

    /**
     * 导入文件分析
     */
    public void importAll()
    {
    	 String fileName = "D:\\aa.xlsx";
    	//读取所有Sheet的数据.每次读完一个Sheet就会调用这个方法
    	EasyExcel.read(fileName, new EasyExceGeneralDatalListener(empService)).doReadAll();
    }

 2、EmpService 

import java.util.List;
import java.util.Map;

public interface EmpService 
{
    public void importData(List<Map<Integer, String>> dataList);
}

 3、EmpServiceImpl 

import java.sql.Connection;
import java.sql.PreparedStatement;
import java.sql.Timestamp;
import java.util.HashMap;
import java.util.List;
import java.util.Map;

import org.springframework.stereotype.Service;

import com.ruoyi.imp.service.EmpService;
import com.ruoyi.jdbc.util.JDBCDruidUtils;

@Service
public class EmpServiceImpl implements EmpService 
{

	/*
     * 测试用Excel导入超过10w条数据,经过测试发现,使用Mybatis的批量插入速度非常慢,所以这里可以使用 数据分批+JDBC分批插入+事务来继续插入速度会非常快
    */
    @Override
    public void importData(List<Map<Integer, String>> dataList) {
        //结果集中数据为0时,结束方法.进行下一次调用
        if (dataList.size() == 0) {
            return;
        }
        //JDBC分批插入+事务操作完成对20w数据的插入
        Connection conn = null;
        PreparedStatement ps = null;
        try {
            long startTime = System.currentTimeMillis();
            System.out.println("此次共"+dataList.size() + "条数据,导入开始时间:" + startTime + "ms");
            // JDBCDruidUtils.getConnection() 此部分为JDBC连接,百度一下就有
            conn = JDBCDruidUtils.getConnection();
            //控制事务:默认不提交
            conn.setAutoCommit(false);
            String sql = "insert into tp_import_all (wy,kh,ch,dk,on,wlc,ncv,mc,jmc) values";
            sql += "(?,?,?,?,?,?,?,?,?)";
            ps = conn.prepareStatement(sql);
            //循环结果集:这里循环不支持"烂布袋"表达式
            for (int i = 0; i < dataList.size(); i++) {
                Map<Integer, String> item = dataList.get(i);
                ps.setString(1, item.get(0));
                ps.setString(2, item.get(1));
                ps.setString(3, item.get(2));
                ps.setString(4, item.get(3));
                ps.setString(5, item.get(4));
                ps.setString(6, item.get(5));
                ps.setString(7, item.get(6));
                ps.setString(8, item.get(7));
                ps.setString(9, item.get(8));
                //将一组参数添加到此 PreparedStatement 对象的批处理命令中。
                ps.addBatch();
            }
            System.out.println("importData方法,executeBatch()...开始执行");
            //执行批处理
            ps.executeBatch();
            System.out.println("importData方法,executeBatch()...执行结束");
            System.out.println("importData方法,commit()...开始提交");
            //手动提交事务
            conn.commit();
            System.out.println("importData方法,commit()...提交结束");
            long endTime = System.currentTimeMillis();
            System.out.println(dataList.size() + "条,导入结束时间:" + endTime + "ms");
            System.out.println("导入用时:" + (endTime - startTime) + "ms");
        } catch (Exception e) {
            e.printStackTrace();
            System.out.println("catch Exception e");
        } finally {
            //关连接
            JDBCDruidUtils.close(conn, ps);
            System.out.println("JDBCDruidUtils.close 关连接");
        }
    }

}

4、EasyExceGeneralDatalListener 

import java.util.ArrayList;
import java.util.List;
import java.util.Map;

import com.alibaba.excel.context.AnalysisContext;
import com.alibaba.excel.event.AnalysisEventListener;
import com.ruoyi.imp.service.EmpService;

// 事件监听
public class EasyExceGeneralDatalListener extends AnalysisEventListener<Map<Integer, String>> {
    /**
     * 处理业务逻辑的Service,也可以是Mapper
     */
    private EmpService  empService;

    /**
     * 用于存储读取的数据
     */
    private List<Map<Integer, String>> dataList = new ArrayList<Map<Integer, String>>();

    public EasyExceGeneralDatalListener() {
    }
    
    public EasyExceGeneralDatalListener(EmpService empService) {
        this.empService = empService;
    }

	@Override
    public void invoke(Map<Integer, String> data, AnalysisContext context) {
        //数据add进入集合
        dataList.add(data);
        //size是否为100000条:这里其实就是分批.当数据等于20w的时候执行一次插入
        if (dataList.size() >= ExcelConstants.GENERAL_ONCE_SAVE_TO_DB_ROWS) {//ExcelConstants.GENERAL_ONCE_SAVE_TO_DB_ROWS Integer类型,控制条数
            //存入数据库:数据小于1w条使用Mybatis的批量插入即可;
            saveData();
            //清理集合便于GC回收
            dataList.clear();
        }
    }

    /**
     * 保存数据到DB
     *
     * @param
     * @MethodName: saveData
     * @return: void
     */
    private void saveData() {
    	System.out.println("saveData方法,importData...开始");
        //    
    	empService.importData(dataList);
    	System.out.println("saveData方法,importData...结束");
        // 回收
        dataList.clear();
    }
    
    /**
     * Excel中所有数据解析完毕会调用此方法
     *
     * @param: context
     * @MethodName: doAfterAllAnalysed
     * @return: void
     */
    @Override
    public void doAfterAllAnalysed(AnalysisContext context) {
    	System.out.println("doAfterAllAnalysed方法,saveData...开始");
        // 调用方法
        saveData();
        System.out.println("doAfterAllAnalysed方法,saveData...结束");
        // 回收
        dataList.clear();
    }
}

三、其他问题

 1、所用版本

        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>easyexcel</artifactId>
            <version>2.2.10</version>
        </dependency>

2、可能会碰到null的报错,可以检查下poi版本是否冲突,这边用的4.1的版本

如果出现poi-ooxml是4.x版本,poi是3.x  可能会出错

  • 0
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: EasyExcel 提供了一种非常简单的方法读取多个sheet,只需要使用read方法的参数来定义要读取sheet即可:read(String sheetNo)。例如:EasyExcel.read(“sheet1,sheet2”),即可读取sheet1和sheet2。 ### 回答2: EasyExcel 是一款基于阿里巴巴的开源项目 EasyExcel 封装的 Java Excel 操作工具,广泛应用于 Excel 数据读写操作。EasyExcel 提供了简单易用的 API 接口,可以方便地读取并操作 Excel 文件。 要读取多个 sheet 的代码,我们首先需要导入 EasyExcel 的依赖包。在 pom.xml 文件中添加以下代码: ``` <!-- 阿里巴巴 EasyExcel --> <dependency> <groupId>com.alibaba</groupId> <artifactId>easyexcel</artifactId> <version>2.3.0</version> </dependency> ``` 然后,我们需要创建一个实现了监听器接口的类,用于对 Excel 数据进行处理。我们可以实现以下接口方法: ```java public class ExcelListener extends AnalysisEventListener<ExcelData> { private List<ExcelData> dataList = new ArrayList<>(); // 读取 Excel 文件内容 @Override public void invoke(ExcelData data, AnalysisContext context) { dataList.add(data); } // 数据读取完毕后的操作,如保存数据、关闭资源等 @Override public void doAfterAllAnalysed(AnalysisContext context) { // 保存数据操作 } // 获取读取数据列表 public List<ExcelData> getDataList() { return dataList; } } ``` 在主程序中,我们可以通过 EasyExcel 提供的 read() 方法读取 Excel 文件,并通过 ExcelListener 对象进行监听和操作。示例代码如下: ```java public class ReadExcel { public static void main(String[] args) { String fileName = "path/to/excelFile.xlsx"; // Excel 文件路径 ExcelListener excelListener = new ExcelListener(); // 使用 read() 方法进行读取 EasyExcel.read(fileName, ExcelData.class, excelListener).sheet().doRead(); List<ExcelData> dataList = excelListener.getDataList(); for (ExcelData data : dataList) { // 对读取数据进行操作 System.out.println(data.toString()); } } } ``` 以上代码会将 Excel 文件中的数据读取到 dataList 列表中,并在控制台输出读取数据。 以上就是使用 EasyExcel 读取多个 sheet 的代码示例。通过实现监听器接口并使用 read() 方法,我们可以灵活地处理 Excel 文件中的数据。希望以上回答对您有帮助! ### 回答3: EasyExcel是一个Java库,可以用于读取和写入Excel文件。要读取多个sheet,可以按照以下步骤编写代码: 1. 导入所需的依赖。在项目的pom.xml文件中添加EasyExcel依赖项: ``` <dependencies> <dependency> <groupId>com.alibaba</groupId> <artifactId>easyexcel</artifactId> <version>2.3.1</version> </dependency> </dependencies> ``` 2. 在Java代码中创建一个读取器对象。可以使用`EasyExcel.read()`方法来创建读取器,并将Excel文件的路径传递给它: ``` String filePath = "your_file_path.xlsx"; ExcelReader excelReader = EasyExcel.read(filePath).build(); ``` 3. 创建一个Sheet读取器。可以通过向`excelReader`对象调用`.sheet()`方法来创建Sheet读取器,并传递Sheet的名称或索引号: ``` ReadSheet readSheet = EasyExcel.readSheet("Sheet1").build(); ``` 4. 添加数据读取的监听器。可以通过实现`AnalysisEventListener`接口并重写其中的方法来自定义数据读取操作。例如,可以在`onSheet()`方法中获取当前Sheet的信息,然后在`invoke()`方法中处理每一行的数据: ``` public class MyDataListener extends AnalysisEventListener<Object> { @Override public void onSheet(int sheetNo, Sheet sheet) { System.out.println("正在读取第" + sheetNo + "个Sheet:" + sheet.getSheetName()); } @Override public void invoke(Object data, AnalysisContext context) { // 处理每一行的数据 System.out.println("读取数据:" + data); } @Override public void doAfterAllAnalysed(AnalysisContext context) { // 读取完成后的操作 } } ``` 5. 将监听器添加到Sheet读取器上。可以通过向`readSheet`对象调用`.registerReadListener()`方法来添加数据读取的监听器: ``` excelReader.read(readSheet).registerReadListener(new MyDataListener()).doRead(); ``` 6. 执行读取操作。最后,使用`doRead()`方法执行读取操作。 通过以上步骤,就可以使用EasyExcel读取Excel文件中的多个sheet了。可以根据需要在监听器中自定义具体的数据处理逻辑。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值