大集合拆分成多个小集合

1. 场景

在数据库批量操作时,有可能数据量过大,不能一次性操作,所以需要将大集合拆分为多个小集合进行多次操作

2. 拆分集合方法(写了三种)

import com.google.common.collect.Lists;
import com.xin.demo.fastjsondemo.FastJsonFormatPrintUtils;
import org.apache.commons.collections4.CollectionUtils;

import java.util.ArrayList;
import java.util.List;
import java.util.stream.Collectors;
import java.util.stream.IntStream;

public class PartitionListDemo {

    private static final int PARTITION_SIZE = 10;
    
    public static void main(String[] args) {

        // 大集合
        List<String> list = new ArrayList<>();
        for (int i = 0; i < 33; i++) {
            list.add("xinliushijian" + i);
        }

        // 方法1 guava工具
        List<List<String>> partitionList = Lists.partition(list, PARTITION_SIZE);
        FastJsonFormatPrintUtils.formatPrint(partitionList);
        System.out.println("===============");

        // 方法2 stream流实现
        List<List<String>> partitionList1 = partList1(list, PARTITION_SIZE);
        FastJsonFormatPrintUtils.formatPrint(partitionList1);

        // 方法3 普通方法实现
        partList2(list, PARTITION_SIZE);
    }

    public static <T> List<List<T>> partList1(List<T> list, int size) {
        if (CollectionUtils.isEmpty(list) || size < 1) {
            return new ArrayList<>();
        }

        List<List<T>> partList = IntStream.range(0, list.size())
                .boxed()
                .collect(Collectors.groupingBy(index -> index / size))
                .values()
                .stream()
                .map(indices -> indices.stream().map(list::get).collect(Collectors.toList()))
                .collect(Collectors.toList());

        return partList;
    }

    public static <T> List<List<T>> partList2(List<T> list, int size) {
        if (CollectionUtils.isEmpty(list) || size < 1) {
            return new ArrayList<>();
        }

        List<List<T>> allPartList = new ArrayList<>();

        for (int i = 0; i < list.size(); i+=size) {
            if (i + size > list.size()) {
                size  = list.size() - i;
            }

            List<T> parList = list.subList(i, i + size);
            allPartList.add(parList);
        }
        FastJsonFormatPrintUtils.formatPrint(allPartList);

        return allPartList;
    }

}

3. 格式化打印方法

import com.alibaba.fastjson.serializer.SerializerFeature;
import com.alibaba.fastjson.JSON;

public class FastJsonFormatPrintUtils {
    public static void formatPrint(Object object) {
        String pretty = JSON.toJSONString(object, SerializerFeature.PrettyFormat, SerializerFeature.WriteMapNullValue,
                SerializerFeature.WriteDateUseDateFormat);

        System.out.println(pretty);
    }

}
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值