Mapper批量处理工具类

前言:公司项目在适配oracle的时候,有一堆批量的增删改语句,是在Mapper的xml里编写的,通过case when语句来判断数据库类型生成不同的批量sql,为了简化开发,但又不想直接引入mybatis-plus,所以参考mybatis-plus的批量操作,编写了一个工具类,用于处理批量操作,只需要写单个的增删改语句即可。

MapperBatchOpUtil
@Slf4j
@Component
public class MapperBatchOpUtil {

    /**
     * 默认批次提交数量
     */
    private static final int DEFAULT_BATCH_SIZE = 1000;

    private static SqlSessionTemplate sqlSessionTemplate;

    public MapperBatchOpUtil(SqlSessionTemplate sqlSessionTemplate) {
        MapperBatchOpUtil.sqlSessionTemplate = sqlSessionTemplate;
    }

/**
     * 批量执行新增/更新/删除操作
     *
     * @param mapperClass 实际执行的mapper类class
     * @param dataList    待执行的数据列表
     * @param callback    具体执行方法
     * @param <M>         实际执行的mapper类
     * @param <T>         待执行的数据类型
     * @return 执行结果
     */
    public static <M, T> long batchOp(Class<M> mapperClass, List<T> dataList, DoUpdateCallback<M, T> callback) {
        long count = 0;
        if (dataList == null || dataList.isEmpty()) {
            return count;
        }
        SqlSessionFactory sqlSessionFactory = sqlSessionTemplate.getSqlSessionFactory();
        SqlSessionHolder sqlSessionHolder = (SqlSessionHolder) TransactionSynchronizationManager.getResource(sqlSessionFactory);
        boolean transaction = TransactionSynchronizationManager.isSynchronizationActive();
        if (sqlSessionHolder != null) {
            SqlSession sqlSession = sqlSessionHolder.getSqlSession();
            //原生无法支持执行器切换,当存在批量操作时,会嵌套两个session的,优先commit上一个session
            //按道理来说,这里的值应该一直为false。
            sqlSession.commit(!transaction);
        }
        try (SqlSession batchSqlSession = sqlSessionFactory.openSession(ExecutorType.BATCH)) {
            if (!transaction) {
                log.warn("BatchSqlSession [" + batchSqlSession + "] was not registered for synchronization because DataSource is not transactional");
            }
            try {
                int size = dataList.size();
                int i = 1;
                M mapper = batchSqlSession.getMapper(mapperClass);
                for (T data : dataList) {
                    callback.execute(mapper, data);
                    if ((i % DEFAULT_BATCH_SIZE == 0) || i == size) {
                        List<BatchResult> batchResults = batchSqlSession.flushStatements();
                        for (BatchResult batchResult : batchResults) {
                            for (int updateCount : batchResult.getUpdateCounts()) {
                                //获取受影响的行数:此处 insert 语句一直返回的是-2;update和delete会返回正确的受影响行数
                                count += updateCount;
                            }
                        }
                    }
                    i++;
                }
                //非事物情况下,强制commit。
                batchSqlSession.commit(!transaction);
            } catch (Throwable t) {
                batchSqlSession.rollback(); // 发生异常时回滚事务
                Throwable unwrapped = ExceptionUtil.unwrapThrowable(t);
                if (unwrapped instanceof RuntimeException) {
                    MyBatisExceptionTranslator myBatisExceptionTranslator
                            = new MyBatisExceptionTranslator(sqlSessionFactory.getConfiguration().getEnvironment().getDataSource(), true);
                    throw Objects.requireNonNull(myBatisExceptionTranslator.translateExceptionIfPossible((RuntimeException) unwrapped));
                }
                throw t;
            }
        }
        //如果count < 0,则返回实际数据量
        return count < 0 ? dataList.size() : count;
    }

}
DoUpdateCallback
public interface DoUpdateCallback<M, T> {
    long execute(M mapper, T data);
}

使用:

SysLogRepository 里使用工具类,调用SysLogMapper里的单个save操作

@Repository
public class SysLogRepository {
    public boolean batchSave(List<SysLogDO> list) {
        return MapperBatchOpUtil.batchOp(SysLogMapper.class, list, SysLogMapper::save) > 0;
    }
    
}

 SysLogMapper 中只有单个的save操作

public interface SysLogMapper {

    long save(@Param("log") SysLogDO logDO);
    
}

以下是一个简单的MyBatis批量插入数据的工具类: ``` public class BatchInsertUtil { private static final int BATCH_SIZE = 1000; public static <T> void batchInsert(List<T> dataList, SqlSession sqlSession, String statement) { if (dataList == null || dataList.isEmpty()) { return; } int size = dataList.size(); int batchCount = size % BATCH_SIZE == 0 ? size / BATCH_SIZE : size / BATCH_SIZE + 1; int startIndex, endIndex; for (int i = 0; i < batchCount; i++) { startIndex = i * BATCH_SIZE; endIndex = Math.min((i + 1) * BATCH_SIZE, size); List<T> subList = dataList.subList(startIndex, endIndex); sqlSession.insert(statement, subList); } sqlSession.flushStatements(); } } ``` 使用方法如下: ``` SqlSession sqlSession = sqlSessionFactory.openSession(ExecutorType.BATCH); try { BatchInsertUtil.batchInsert(dataList, sqlSession, "com.example.mapper.insertBatch"); sqlSession.commit(); } catch (Exception e) { sqlSession.rollback(); } finally { sqlSession.close(); } ``` 其中,`dataList`为待插入的数据列表,`sqlSession`为MyBatis的`SqlSession`对象,`statement`为对应的Mapper方法名称。要使用该工具类,需要在Mapper文件中定义对应的批量插入方法,例如: ``` <insert id="insertBatch" parameterType="java.util.List"> insert into my_table (column1, column2, column3) values <foreach collection="list" item="item" separator=","> (#{item.column1}, #{item.column2}, #{item.column3}) </foreach> </insert> ``` 该方法使用了MyBatis的`foreach`标签,将数据列表中的每一个元素都插入到数据库中。由于批量插入数据可能会造成内存溢出,因此在插入前需要将数据列表按照一定的大小分为多个批次插入,本例中批次大小为1000。在插入完成后需要调用`flushStatements()`方法来刷新缓存,确保所有的语句都已经发送到数据库。
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值