java多线程查询数据库(分段查询)

 根据数据集合的大小,所开线程的数量,计算每个线程需要执行查询的数据量。

计算出SQL语句中每个查询的起始位置和结束位置下标。

每个线程,查询各自的范围内的数据。

public void queryByThread() {
        // 数据集合大小,由调用者自己指定
        int listSize = 100;
        // 开启的线程数
        int runSize = 20;
        // 一个线程处理数据条数,如果库中有100条数据,开启20个线程,那么每一个线程执行的条数就是5条
        int count = listSize / runSize;//5
        // 创建一个线程池,数量和开启线程的数量一样
        ExecutorService executor = CreateThreadUtil.createThread(runSize);
        // 计算sql语句中每个分页查询的起始和结束数据下标
        // 循环创建线程
        //此处调用具体的查询方法
        System.out.println("开始查询");
        for (int i = 0; i < runSize; i++) {
            int index = i * count;
            int num = count;
            executor.execute(new Runnable() {
                @Override
                public void run() {
                    try {
                        //查询的结果如何保存下来,会不会存在覆盖的问题
                        System.out.println("每次查询的下标:" + index + ",条数:" + num);
                        List<Text> textList = textMapper.queryByThread(index, num);
                        //这里做处理信息的方法
                        
                    } catch (Exception e) {
                        System.out.println("查询失败" + e);
                    }
                }
            });
        }
        // 执行完关闭线程池
        executor.shutdown();
    }

创建线程池:

package com.klay.service.impl;

import com.google.common.util.concurrent.ThreadFactoryBuilder;

import java.util.concurrent.LinkedBlockingQueue;
import java.util.concurrent.ThreadFactory;
import java.util.concurrent.ThreadPoolExecutor;
import java.util.concurrent.TimeUnit;

public class CreateThreadUtil {
    
    public static ThreadPoolExecutor createThread(int runSize)
    {
        ThreadFactory namedThreadFactory = new ThreadFactoryBuilder()
                .setNameFormat("测试信息").build();//创建线程工厂

        //创建线程池
        ThreadPoolExecutor executor = new ThreadPoolExecutor(runSize,
                runSize,
                0L,
                TimeUnit.MILLISECONDS,
                new LinkedBlockingQueue<>(1024),
                namedThreadFactory,
                new ThreadPoolExecutor.AbortPolicy());
        return executor;
    }
}

  • 2
    点赞
  • 58
    收藏
    觉得还不错? 一键收藏
  • 6
    评论
Java中,可以使用多线程来并发查询数据库。引用中提供了一个使用线程池控制分页并发查询的示例代码。首先,根据数据集合的大小和需要开启的线程数,确定每个线程处理的数据条数。然后,创建一个线程池,并循环创建线程,每个线程负责查询各自范围内的数据。查询的结果可以保存在一个列表中,以便后续处理。最后,执行完毕后关闭线程池。 另外,还可以使用Callable和Future来实现多线程查询数据库。引用中提供了一个使用Callable方式的示例代码。在call()方法中,可以创建数据库连接,并执行查询操作。查询结果可以存储在一个列表中,并通过返回值返回给主线程。 总结起来,使用多线程查询数据库可以提高查询效率,特别是对于大量数据的查询。通过合理地分配线程和利用线程池,可以实现并发查询并提高系统的响应速度。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [java多线程查询数据库](https://download.csdn.net/download/haolilaoda/10144194)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 33.333333333333336%"] - *2* [java多线程查询数据库分段查询)](https://blog.csdn.net/weixin_40052298/article/details/123356715)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 33.333333333333336%"] - *3* [【多线程Java实现多线程查询数据库并返回值](https://blog.csdn.net/Damionew/article/details/103564156)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 33.333333333333336%"] [ .reference_list ]
评论 6
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值