Java中的线程池（Thread Pools）配置详解

爱上口袋的天空

已于 2024-02-29 14:38:51 修改

阅读量257

点赞数

分类专栏： # 多线程文章标签： java

于 2021-08-08 18:25:21 首次发布

原文链接：https://blog.csdn.net/yangshangwei/article/details/77850647

版权

多线程专栏收录该内容

58 篇文章 2 订阅

订阅专栏

本文详细介绍了Java线程池的工作原理、优点、使用方法及参数配置，包括核心线程数、最大线程数、空闲时间、任务队列和拒绝策略。线程池通过合理配置能降低资源消耗、提高响应速度和管理线程。文章还讨论了如何监控线程池，提供了一些常见的线程池配置策略。

摘要由CSDN通过智能技术生成

1、线程池的优点

2、线程池的实现原理

ThreadPoolExecutor执行execute()方法的示意图如下所示：

ThreadPoolExecutor中线程执行任务的示意图如下

1）核心线程数量 corePoolSize

2）最大线程数 maximumPoolSize

3）最大空闲时间 KeepAliveTime

4）任务队列长度 workQueue

5）rejectedExecutionHandler策略

3.4、线程池的监控

1、线程池的优点

Java中的线程池是运用场景最多的并发框架，几乎所有需要异步或并发执行任务的程序都可以使用线程池。在开发过程中，合理地使用线程池能够带来3个好处。

降低资源消耗。
通过重复利用已创建的线程来降低线程创建和销毁的造成的消耗
提高响应速度
当任务到达时，任务可不用等待线程创建就能立即执行
提高线程的可管理性
线程是稀缺资源，不能无限制的创建，使用线程池可以进行统一分配、调优和监控，增强稳定性。

2、线程池的实现原理

当向线程池提交一个任务之后，线程池是如何处理这个任务的呢？

我们来看一下线程池的主要处理流程，处理流程图如下：

这里写图片描述

从图中可以看出，当提交一个新任务到线程池时，线程池的处理流程如下。

1）线程池判断核心线程池里的线程是否都在执行任务。如果不是，则创建一个新的工作线程来执行任务。如果核心线程池里的线程都在执行任务，则进入下个流程。
2）线程池判断工作队列是否已经满。如果工作队列没有满，则将新提交的任务存储在这个工作队列里。如果工作队列满了，则进入下个流程。
3）当任务队列已满，并且当前线程数小于最大线程数时，线程池会创建新的线程来处理任务。线程数到达核心线程数量，并且任务队列满了，线程数也到达最大线程数了，也就是说线程池处于饱和状态了，已经无法再融入其他任务了，那这个时候我们就能给出一个饱和策略来处理这个任务。

ThreadPoolExecutor执行execute()方法的示意图如下所示：

这里写图片描述

ThreadPoolExecutor执行execute方法分下面4种情况。

1）如果当前运行的线程少于corePoolSize，则创建新线程来执行任务（注意，执行这一步骤需要获取全局锁）。
2）如果运行的线程等于或多于corePoolSize，则将任务加入BlockingQueue。
3）如果无法将任务加入BlockingQueue（队列已满），则创建新的线程来处理任务（注意，执行这一步骤需要获取全局锁）。
4）如果创建新线程将使当前运行的线程超出maximumPoolSize，任务将被拒绝，并调用RejectedExecutionHandler.rejectedExecution()方法。

ThreadPoolExecutor采取上述步骤的总体设计思路，是为了在执行execute()方法时，尽可能地避免获取全局锁（那将会是一个严重的可伸缩瓶颈）。

在ThreadPoolExecutor完成预热之后（当前运行的线程数大于等于corePoolSize），几乎所有的execute()方法调用都是执行步骤2，而步骤2不需要获取全局锁。

ThreadPoolExecutor中线程执行任务的示意图如下

这里写图片描述

线程池中的线程执行任务分两种情况，如下。

1）在execute()方法中创建一个线程时，会让这个线程执行当前任务。
2）这个线程执行完上图中1的任务后，会反复从BlockingQueue获取任务来执行。

3、线程池的使用

3.1、创建线程池

我们可以通过ThreadPoolExecutor来创建一个线程池

其中一个构造函数如下：

  public ThreadPoolExecutor(int corePoolSize,
                              int maximumPoolSize,
                              long keepAliveTime,
                              TimeUnit unit,
                              BlockingQueue<Runnable> workQueue,
                              RejectedExecutionHandler handler) {
        this(corePoolSize, maximumPoolSize, keepAliveTime, unit, workQueue,
             Executors.defaultThreadFactory(), handler);
    }

可以抽象为

new ThreadPoolExecutor(corePoolSize, maximumPoolSize, keepAliveTime,
milliseconds,runnableTaskQueue, handler);

参数解读：

corePoolSize （线程池的基本大小）：当提交一个任务到线程池时，线程池会创建一个线程来执行任务，即使其他空闲的基本线程能够执行新任务也会创建线程，等到需要执行的任务数大于线程池基本大小时就不再创建。如果调用了线程池的prestartAllCoreThreads()方法，线程池会提前创建并启动所有基本线程。
maximumPoolSize（线程池最大数量）：线程池允许创建的最大线程数。如果队列满了，并且已创建的线程数小于最大线程数，则线程池会再创建新的线程执行任务。值得注意的是，如果使用了无界的任务队列这个参数就没什么效果。
keepAliveTime（线程活动保持时间）：线程池的工作线程空闲后，保持存活的时间。所以如果任务很多，并且每个任务执行的时间比较短，可以调大时间，提高线程的利用率。
TimeUnit （线程活动保持时间的单位）：可选的单位有天（DAYS）、小时（HOURS）、分钟（MINUTES）、毫秒（MILLISECONDS）、微秒（MICROSECONDS，千分之一毫秒）和纳秒（NANOSECONDS，千分之一微秒）。
runnableTaskQueue（任务队列）：用于保存等待执行的任务的阻塞队列。可以选择以下几个阻塞队列。

ArrayBlockingQueue：是一个基于数组结构的有界阻塞队列，此队列按FIFO（先进先出）原则对元素进行排序。

·LinkedBlockingQueue：一个基于链表结构的阻塞队列，此队列按FIFO排序元素，吞吐量通常要高于ArrayBlockingQueue。静态工厂方法Executors.newFixedThreadPool()使用了这个队列。

SynchronousQueue：一个不存储元素的阻塞队列。每个插入操作必须等到另一个线程调用移除操作，否则插入操作一直处于阻塞状态，吞吐量通常要高于Linked-BlockingQueue，静态工厂方法Executors.newCachedThreadPool使用了这个队列。

PriorityBlockingQueue：一个具有优先级的无限阻塞队列。

RejectedExecutionHandler （饱和策略）：当队列和线程池都满了，说明线程池处于饱和状态，那么必须采取一种策略处理提交的新任务。默认策略为AbortPolicy，表示无法处理新任务时抛出异常。

在JDK 1.5中Java线程池框架提供了以下4种策略。
·AbortPolicy：直接抛出异常。
·CallerRunsPolicy：只用调用者所在线程来运行任务。
·DiscardOldestPolicy：丢弃队列里最近的一个任务，并执行当前任务。
·DiscardPolicy：不处理，丢弃掉。
当然，也可以根据应用场景需要来实现RejectedExecutionHandler接口自定义策略。如记录日志或持久化存储不能处理的任务。

ThreadFactory：用于设置创建线程的工厂，可以通过线程工厂给每个创建出来的线程设置更有意义的名字。使用开源框架guava提供的ThreadFactoryBuilder可以快速给线程池里的线程设置有意义的名字，代码如下。

new ThreadFactoryBuilder().setNameFormat("XX-task-%d").build();

3.2、向线程池中提交任务

可以使用两个方法向线程池提交任务，分别为execute()和submit()方法。

execute()方法用于提交不需要返回值的任务，所以无法判断任务是否被线程池执行成功。

通过以下代码可知execute()方法输入的任务是一个Runnable类的实例。

threadsPool.execute(new Runnable() {
	@Override
	public void run() {
	// TODO Auto-generated method stub
	}
});

submit()方法用于提交需要返回值的任务。

线程池会返回一个future类型的对象，通过这个future对象可以判断任务是否执行成功，并且可以通过future的get()方法来获取返回值，get()方法会阻塞当前线程直到任务完成，而使用get（long timeout，TimeUnit unit）方法则会阻塞当前线程一段时间后立即返回，这时候有可能任务没有执行完。

Future<Object> future = executor.submit(harReturnValuetask);
	try {
		Object s = future.get();
		} catch (InterruptedException e) {
		// 处理中断异常
		} catch (ExecutionException e) {
		// 处理无法执行任务异常
		} finally {
		// 关闭线程池
		executor.shutdown();
}

3.3、合理的配置线程池参数

1）核心线程数量 corePoolSize

表示核心线程数，即在不发生任务队列满或者其他拒绝策略下，线程池保持的最小线程数。corePoolSize 的配置需要根据具体情况进行调整，以满足业务需求和系统性能要求。

如下分为两种说法：

说法一：根据任务类型进行判断

    不同类型的任务对线程池的需求不同。比如 I/O 密集型任务可以使用更多的线程以提高并行性，而计算密集型任务则需要更少的线程以避免 CPU 过载。
1）对于 CPU 密集型任务，应该将核心线程数设置为处理器核心数加 1 或者 2
  corePoolSize = cpu核心数+1 或者 corePoolSize = cpu核心数+2
2）对于 I/O 密集型任务，可以适当增加核心线程数以利用空闲的 CPU 时间。具体大小可以根据实际情况进行调整，建议设置在 2 x N 左右，其中 N 是可用 CPU 核心数
  corePoolSize = cpu核心数 * 2

说法二：依据任务的处理时间和每秒产生的任务数量来确定

核心线程数的设计需要依据任务的处理时间和每秒产生的任务数量来确定。

例如:

执行一个任务需要0.1秒,系统百分之80的时间每秒都会产生100个任务,那么要想在1秒内处理完这100个务,就需要10个线程,此时我们就可以设计核心线程数为10;当然实际情况不可能这么平均,所以我们一般按照8020原则设计即可,既按照百分之80的情况设计核心线程数,剩下的百分之20可以利用最大线程数处理。所以：核心线程数为8，最大线程数为10

综上：可以结合上面的两种说法考虑

2）最大线程数 maximumPoolSize

最大线程数，表示线程池中最多能够容纳的线程数量。根据实际业务情况、系统资源和性能考虑来选择，一般建议不要过大，避免因过度创建线程而影响系统性能和稳定性

说法一：corePoolSize一样

最大线程数在生产环境上我们往往设置成corePoolSize一样，这样可以减少在处理过程中创建线程的开销

说法二：参照系统每秒产生的最大任务数

最大线程数的设计除了需要参照核心线程数的条件外,还需要参照系统每秒产生的最大任务数决定。

例如:上述环境中,如果系统每秒最大产生的任务是1000个,那么：

最大线程数=(最大任务数-任务队列长度)×单个任务执行时间 : 最大线程数=(1000-200)×0.1=80

综上：可以结合上面的两种说法考虑

3）最大空闲时间 KeepAliveTime

当线程池中的线程数量大于核心线程数时，多余的空闲线程的存活时间。如果空闲时间超过该值，多余的线程将被销毁，直到线程池中的线程数量等于核心线程数。
1）对于 CPU 密集型任务，因为线程需要大量计算，所以不宜让空闲线程持续存在，以避免浪费系统资源。因此，建议将 keepAliveTime 设置得较短（例如 10 秒），以便及时回收空闲线程
 2）对于 I/O 密集型任务，由于线程大部分时间都处于等待 I/O 操作的状态，因此可以适当增加 keepAliveTime，以利用空闲的 CPU 时间，提高系统效率。建议 keepAliveTime 的值在数十秒或者数分钟之间

4）任务队列长度 workQueue

任务队列长度一般设计为:核心线程数/单个任务执行时间成×2即可。

例如上面的场景中,核心线程数设计为10,单个任务执行时间为0.1秒,则队列长度可以设计为200。

5）rejectedExecutionHandler策略

根据具体情况来决定，任务不重要可丢弃，任务重要则要利用一些缓冲机制来处理。

1）CallerRunsPolicy：将任务回退到调用者线程执行。这种策略可以避免任务丢失，并且不会导致队列溢出，但可能会影响调用线程的性能

2）AbortPolicy：直接抛出 RejectedExecutionException 异常，以拒绝新的任务提交。这种策略可以保证系统稳定性，但会导致部分任务无法完成，因此需要根据实际情况做好异常处理和日志记录。

3）DiscardPolicy：直接丢弃新的任务，不予处理。这种策略适用于那些对任务结果要求不高的场景，但也可能会导致任务丢失，因此需要慎重使用。

4）DiscardOldestPolicy：丢弃队列中等待时间最长的任务，并尝试重新提交新的任务。这种策略可以保证队列不会溢出，但可能会导致一些任务被丢失或延迟执行

3.4、线程池的监控

如果在系统中大量使用线程池，则有必要对线程池进行监控，方便在出现问题时，可以根据线程池的使用状况快速定位问题。可以通过线程池提供的参数进行监控，在监控线程池的时候可以使用以下属性。

taskCount：线程池需要执行的任务数量。
·completedTaskCount：线程池在运行过程中已完成的任务数量，小于或等于taskCount。
·largestPoolSize：线程池里曾经创建过的最大线程数量。通过这个数据可以知道线程池是否曾经满过。如该数值等于线程池的最大大小，则表示线程池曾经满过。
·getPoolSize：线程池的线程数量。如果线程池不销毁的话，线程池里的线程不会自动销毁，所以这个大小只增不减。
·getActiveCount：获取活动的线程数。

通过扩展线程池进行监控。可以通过继承线程池来自定义线程池，重写线程池的beforeExecute、afterExecute和terminated方法,这几个方法在线程池里是空方法。

protected void beforeExecute(Thread t, Runnable r) { }

protected void afterExecute(Runnable r, Throwable t) { }

protected void terminated() { }

也可以在任务执行前、执行后和线程池关闭前执行一些代码来进行监控。例如，监控任务的平均执行时间、最大执行时间和最小执行时间等。

爱上口袋的天空

关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
Java中的线程池（Thread Pools）配置详解

线程池的优点Java中的线程池是运用场景最多的并发框架，几乎所有需要异步或并发执行任务的程序都可以使用线程池。在开发过程中，合理地使用线程池能够带来3个好处。降低资源消耗。通过重复利用已创建的线程来降低线程创建和销毁的造成的消耗提高响应速度当任务到达时，任务可不用等待线程创建就能立即执行提高线程的可管理性线程是稀缺资源，不能无限制的创建，使用线程池可以进行统一分配、调优和监控，增强稳定性。线程池的实现原理当向线程池提交一个任务之后，线程池是如何处理这
复制链接

扫一扫