mybatis插入海量数据报错，对集合拆分后插入，工具类

最新推荐文章于 2024-01-30 17:09:52 发布

少年ing

最新推荐文章于 2024-01-30 17:09:52 发布

阅读量171

点赞数

分类专栏：工具类文章标签： mybatis java mysql

本文链接：https://blog.csdn.net/weixin_35815479/article/details/128440126

版权

工具类专栏收录该内容

11 篇文章 0 订阅

订阅专栏

工具类

package com.yxsd.cnooc.data.common.util;

import java.util.ArrayList;
import java.util.List;

/**
 * 数据库操作工具类
 */
public class SqlUtils {

    /**
     * 分段阈值
     */
    private static final Integer SEGMENTED_THRESHOLD = 1000;

    /**
     * 单条数据记录数
     */
    private static final Integer NUMBER_OF_SINGLE_RECORDS = 500;

    /**
     * 分段插入数据库
     */
    public static <T> List<List<T>> segmentedInsert(List<T> tList) {
        List<List<T>> result = new ArrayList<>();
        if (tList.size() >= SEGMENTED_THRESHOLD) {
            int times = (int) Math.ceil(tList.size() / NUMBER_OF_SINGLE_RECORDS.doubleValue());
            for (int i = 0; i < times; i++) {
                result.add(tList.subList(i * NUMBER_OF_SINGLE_RECORDS, Math.min((i + 1) * NUMBER_OF_SINGLE_RECORDS, tList.size())));
            }
        } else {
            result.add(tList);
        }
        return result;
    }



    /**
     * 自定义分段数量
     */
    public static <T> List<List<T>> segmentedInsert(List<T> tList, Integer segments) {
        List<List<T>> result = new ArrayList<>();
        if (tList.size() >= SEGMENTED_THRESHOLD) {
            int times = (int) Math.ceil(tList.size() / segments.doubleValue());
            for (int i = 0; i < times; i++) {
                result.add(tList.subList(i * segments, Math.min((i + 1) * segments, tList.size())));
            }
        } else {
            result.add(tList);
        }
        return result;
    }

}

使用

// 对list集合拆分 并插入数据库 
List<List<Student>> lists = SqlUtils.segmentedInsert(pkList);
        for (List<Student> listTemp : lists) {
            studentMapper.saveStudentList(listTemp);
        }