list分组多线程处理数据

//创建线程池
    private static ThreadPoolExecutor threadPoolExecutor ;
    static {
        threadPoolExecutor = new ThreadPoolExecutor(4, 10, 60, TimeUnit.SECONDS,new LinkedBlockingDeque<>(10000), Executors.defaultThreadFactory(),new ThreadPoolExecutor.DiscardPolicy());
    }
public List<T> dealWithListByThread(List<T> list) {
		//最终结果
        List<T> result = new ArrayList<>();

        if(CollectionUtil.isNotEmpty(list)){
            //每次处理100个,集合按固定数量分成子集合,hutool工具类
            List<List<T>> split = ListUtil.split(list, 100);
            log.info("拆分个数:{}",split.size());
            
            CountDownLatch countDownLatch = new CountDownLatch(split.size());
            
            List<Future<List<T>>> futureList = new ArrayList<>();

            for ( List<T> itemList : split){
                Future<List<T>> submit = threadPoolExecutor.submit(new Callable<List<T>>() {
                    @Override
                    public List<T> call(){
                        //TODO 处理itemList,并返回处理后的数据
                        return itemList ;
                    }
                });

                futureList.add(submit);
                countDownLatch.countDown();
            }

            try {
                countDownLatch.await();
                for(Future<List<T>> item : futureList){
                    result.addAll(item.get());
                }
            } catch (Exception e) {
                log.error("多线程处理分页数据异常:",e);
            }
        }
        return result;
    }
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值