线程池的使用
Java 中提供的线程池 Api
为了方便大家对于线程池的使用，在 Executors 里面提供了几个线程池的工厂方法，这样只需要直接使用Executors 的工厂方法，就可以使用线程池：
newFixedThreadPool：该方法返回一个固定数量的线程池，线程数不变，当有一个任务提交时，若线程池中空闲，则立即执行，若没有，则会被暂缓在一个任务队列中，等待有空闲的线程去执行。
newSingleThreadExecutor: 创建一个线程的线程池，若空闲则执行，若没有空闲线程则暂缓在任务队列中。
newCachedThreadPool：返回一个可根据实际情况调整线程个数的线程池，不限制最大线程数量，若有空闲的线程则执行任务，若无任务则不创建线程。并且每一个空闲线程会在 60 秒后自动回收
newScheduledThreadPool: 创建一个可以指定线程的数量的线程池，但是这个线程池还带有延迟和周期性执行任务的功能，类似定时器
public class ExecutorsDemo implements Runnable {
public static void main(String[] args) {
ExecutorService executorService = Executors.newFixedThreadPool(5);//固定线程数量
for (int i = 0 ; i < 10 ; i++){
executorService.execute(new ExecutorsDemo());
}
executorService.shutdown();
// ExecutorService executorService = Executors.newSingleThreadExecutor(); //只有一个核心线程的线程池
// ExecutorService executorService = Executors.newCachedThreadPool();//带有缓存的线程池
// ExecutorService executorService = Executors.newScheduledThreadPool();//可以延期执行，心跳检测
}
@Override
public void run() {
System.out.println(Thread.currentThread().getName());
}
}
线程池的实现
public static ExecutorService newFixedThreadPool(int nThreads) {
return new ThreadPoolExecutor(nThreads, nThreads,
0L, TimeUnit.MILLISECONDS,
new LinkedBlockingQueue<Runnable>());
}
public static ExecutorService newSingleThreadExecutor() {
return new FinalizableDelegatedExecutorService
(new ThreadPoolExecutor(1, 1,
0L, TimeUnit.MILLISECONDS,
new LinkedBlockingQueue<Runnable>()));
}
public static ExecutorService newCachedThreadPool() {
return new ThreadPoolExecutor(0, Integer.MAX_VALUE,
60L, TimeUnit.SECONDS,
new SynchronousQueue<Runnable>());
}
这三种线程池的共同之处：ThreadPoolExecutor
// corePoolSize：核心线程数量
// maximumPoolSize：最大线程数：临时线程数量 = （maximumPoolSize - corePoolSize）
// keepAliveTime：临时线程的存活时间
// unit：存活单位
// workQueue：阻塞队列
// threadFactory：线程工厂
// handler：拒绝策略
public ThreadPoolExecutor(int corePoolSize,
int maximumPoolSize,
long keepAliveTime,
TimeUnit unit,
BlockingQueue<Runnable> workQueue,
ThreadFactory threadFactory,
RejectedExecutionHandler handler) {
if (corePoolSize < 0 ||
maximumPoolSize <= 0 ||
maximumPoolSize < corePoolSize ||
keepAliveTime < 0)
throw new IllegalArgumentException();
if (workQueue == null || threadFactory == null || handler == null)
throw new NullPointerException();
this.acc = System.getSecurityManager() == null ?
null :
AccessController.getContext();
this.corePoolSize = corePoolSize;
this.maximumPoolSize = maximumPoolSize;
this.workQueue = workQueue;
this.keepAliveTime = unit.toNanos(keepAliveTime);
this.threadFactory = threadFactory;
this.handler = handler;
}
线程池初始化以后做了什么事情？
线程池初始化时是没有创建线程的，线程池里的线程的初始化与其他线程一样，但是在完成任务以后，该线程不会自行销毁，而是以挂起的状态返回到线程池。直到应用程序再次向线程池发出请求时，线程池里挂起的线程就会再度激活执行任务。这样既节省了建立线程所造成的性能损耗，也可以让多个任务反复重用同一线程，从而在应用程序生存期内节约大量开销
- newFixedThreadPool
public static ExecutorService newFixedThreadPool(int nThreads) {
return new ThreadPoolExecutor(nThreads, nThreads,
0L, TimeUnit.MILLISECONDS,
new LinkedBlockingQueue<Runnable>());
}
FixedThreadPool 的核心线程数和最大线程数都是指定值，也就是说当线程池中的线程数超过核心线程数后，任务都会被放到阻塞队列中。另外 keepAliveTime 为 0，也就是超出核心线程数量以外的线程存活时间，而这里选用的阻塞队列是LinkedBlockingQueue，使用的是默认容量 Integer.MAX_VALUE，相当于没有上限
这个线程池执行任务的流程如下：
1）线程数少于核心线程数，也就是设置的线程数时，新建线程执行任务
2）线程数等于核心线程数后，将任务加入阻塞队列
3）由于队列容量非常大，可以一直添加
4）执行完任务的线程反复去队列中取任务执行
用途：FixedThreadPool 用于负载比较大的服务器，为了资源的合理利用，需要限制当前线程数量
- newCachedThreadPool
public static ExecutorService newCachedThreadPool() {
return new ThreadPoolExecutor(0, Integer.MAX_VALUE,
60L, TimeUnit.SECONDS,
new SynchronousQueue<Runnable>());
}
CachedThreadPool 创建一个可缓存线程池，如果线程池长度超过处理需要，可灵活回收空闲线程，若无可回收，则新建线程; 并且没有核心线程，非核心线程数无上限，但是每个空闲的时间只有 60 秒，超过后就会被回收。
它的执行流程如下：
1）没有核心线程，直接向 SynchronousQueue 中提交任务
2）如果有空闲线程，就去取出任务执行；如果没有空闲线程，就新建一个
3）执行完任务的线程有 60 秒生存时间，如果在这个时间内可以接到新任务，就可以继续活下去，否则就被回收
- newSingleThreadExecutor
public static ExecutorService newSingleThreadExecutor() {
return new FinalizableDelegatedExecutorService
(new ThreadPoolExecutor(1, 1,
0L, TimeUnit.MILLISECONDS,
new LinkedBlockingQueue<Runnable>()));
}
创建一个单线程化的线程池，它只会用唯一的工作线程来执行任务，保证所有任务按照指定顺序(FIFO, LIFO, 优先级)执行
线程池的实现原理
ThreadPoolExecutor 是线程池的核心，提供了线程池的实现。
ScheduledThreadPoolExecutor 继承了 ThreadPoolExecutor，并另外提供一些调度方法以支持定时和周期任务。Executers 是工具类，主要用来创建线程池对象
源码分析
- void execute(Runnable command)：执行线程任务
public void execute(Runnable command) {
if (command == null)
throw new NullPointerException();
int c = ctl.get();
if (workerCountOf(c) < corePoolSize) {//1.当前池中线程比核心数少，新建一个线程执行任务
if (addWorker(command, true))
return;
c = ctl.get();
}
if (isRunning(c) && workQueue.offer(command)) {//2.核心池已满，但任务队列未满，添加到队列中
int recheck = ctl.get();
//任务成功添加到队列以后，再次检查是否需要添加新的线程，因为已存在的线程可能被销毁了
if (! isRunning(recheck) && remove(command))
//如果线程池处于非运行状态，并且把当前的任务从任务队列中 移除成功，则拒绝该任务
reject(command);
else if (workerCountOf(recheck) == 0)//如果之前的线程已被销毁完，新建一个线程
addWorker(null, false);
}
else if (!addWorker(command, false)) //3.核心池已满，队列已满，试着创建一个新线程
//如果创建新线程失败了，说明线程池被关闭或者线程池完全满了， 拒绝任务
reject(command);
}
// 在线程池中，ctl 贯穿在线程池的整个生命周期中,它是一个原子类，主要作用是用来保存线程数量和线程池的状态.
// 他用到了位运算:一个 int 数值是 32 个 bit 位，这里采用高 3 位来保存运行状态，低29位来保存线程数量。
// 默认情况下，也就是 ctlOf(RUNNING)运行状态，调用了 ctlOf(int rs,int wc)方法；
// 其中private static int ctlOf(int rs, int wc) { return rs | wc; }
// 其中 RUNNING =-1 << COUNT_BITS ； -1 左移 29 位. -1 的二进制是 32 个 1（1111 1111 1111 1111 1111 1111 1111 1111）
// -1 的二进制计算方法
// 原码是 1000…001 . 高位 1 表示符号位。
// 然后对原码取反，高位不变得到 1111…110
// 然后对反码进行+1 ，也就是补码操作， 最后得到 1111…1111
// 那么-1 <<左移 29 位， 也就是 【111】 表示； rs | wc 。二进制的 111 | 000 。得到的结果仍然是 111
private final AtomicInteger ctl = new AtomicInteger(ctlOf(RUNNING, 0));
// 同理可得其他的状态的 bit 位表示
private static final int COUNT_BITS = Integer.SIZE - 3; //32-3
//将 1 的二进制向右位移 29 位,再减 1 表示最大线程容量
private static final int CAPACITY = (1 << COUNT_BITS) - 1;
// runState is stored in the high-order bits
// 运行状态保存在 int 值的高 3 位 ( 所有数值左移 29 位
private static final int RUNNING = -1 << COUNT_BITS; // 接收新任务,并执行队列中的任务
// 不接收新任务,但是执行队列中的任务
private static final int SHUTDOWN = 0 << COUNT_BITS;
// 不接收新任务,不执行队列中的任务,中断正在执行中的任务
private static final int STOP = 1 << COUNT_BITS;
// 所有的任务都已结束,线程数量为 0,处于该状态的线程池即将调用 terminated()方法
private static final int TIDYING = 2 << COUNT_BITS;
// terminated()方法执行完成
private static final int TERMINATED = 3 << COUNT_BITS;
- boolean addWorker(Runnable firstTask, boolean core) ;
// 创建工作线程
// 其实就做了两件事。1）自旋用循环 CAS 操作来将线程数加 1；
// 2）新建一个线程并启用。
private boolean addWorker(Runnable firstTask, boolean core) {
retry: //goto 语句,避免死循环
for (;;) {
int c = ctl.get();
int rs = runStateOf(c);
// 如果线程处于非运行状态，并且 rs 不等于 SHUTDOWN 且 firstTask 不等于空且workQueue 为空，
// 直接返回 false （表示不可添加 work 状态）
// 1.线程池已经 shutdown 后，还要添加新的任务，拒绝
// 2.（第二个判断） SHUTDOWN 状态不接受新任务，但仍然会执行已经加入任务队列的任务，
// 所以当进入 SHUTDOWN 状态，而传进来的任务为空，并且任务队列不为空的时候，
// 是允许添加新线程的 , 如果把这个条件取反，就表示不允许添加worker
// Check if queue empty only if necessary.
if (rs >= SHUTDOWN &&
! (rs == SHUTDOWN &&
firstTask == null &&
! workQueue.isEmpty()))
return false;
for (;;) {
int wc = workerCountOf(c);//获得 Worker 工作线程数
//如果工作线程数大于默认容量大小或者大于核心线程数大小，则直接返回 false 表示不能再添加 worker。
if (wc >= CAPACITY ||
wc >= (core ? corePoolSize : maximumPoolSize))
return false;
//通过 cas 来增加工作线程数，如果 cas 失败，则直接重试
if (compareAndIncrementWorkerCount(c))
break retry;
// 再次获取 ctl 的值
c = ctl.get(); // Re-read ctl
//这里如果不相等，说明线程的状态发生了变化，继续重试
if (runStateOf(c) != rs)
continue retry;
// else CAS failed due to workerCount change; retry inner loop
}
}
//上面的代码主要是对worker数量做原子+1操作,下面的逻辑才是正式构建一个 worker
//工作线程是否启动的标识
boolean workerStarted = false;
//工作线程是否已经添加成功的标识
boolean workerAdded = false;
Worker w = null;
try {
//构建一个 Worker（线程），
w = new Worker(firstTask);
//从 worker 对象中取出线程
final Thread t = w.thread;
if (t != null) {
final ReentrantLock mainLock = this.mainLock;
//这里有个重入锁，避免并发问题
mainLock.lock();
try {
// Recheck while holding lock.
// Back out on ThreadFactory failure or if
// shut down before lock acquired.
int rs = runStateOf(ctl.get());
//只有当前线程池是正在运行状态，[或是 SHUTDOWN 且 firstTask 为空]，才能添加到workers集合中
if (rs < SHUTDOWN ||
(rs == SHUTDOWN && firstTask == null)) {
//任务刚封装到work里面，还没 start,所以要抛异常出去
if (t.isAlive()) // precheck that t is startable
throw new IllegalThreadStateException();
//将新创建的 Worker 添加到 workers 集合中HashSet<Worker>
workers.add(w);
int s = workers.size();
//如果集合中的工作线程数大于最大线程数，这个最大线程数表示线程池曾经出现过的最大线程数
if (s > largestPoolSize)
//更新线程池出现过的最大线程数
largestPoolSize = s;
//表示工作线程创建成功了
workerAdded = true;
}
} finally {
mainLock.unlock();//释放锁
}
//如果 worker 添加成功
if (workerAdded) {
//启动线程
t.start();
workerStarted = true;
}
}
} finally {
if (! workerStarted)
//如果添加失败，就需要做一件事，就是递减实际工作线程数
addWorkerFailed(w);
}
//返回结果
return workerStarted;
}
- void addWorkerFailed(Worker w)；
// addWorker 方法中，如果添加 Worker 并且启动线程失败，则会做失败后的处理。
// 这个方法主要做三件事
// 1. 如果 worker 已经构造好了，则从 workers 集合中移除这个 worker
// 2. 原子递减核心线程数（因为在 addWorker 方法中先做了原子增加）
// 3. 尝试结束线程池
private void addWorkerFailed(Worker w) {
final ReentrantLock mainLock = this.mainLock;
mainLock.lock();
try {
if (w != null)
// 如果 worker 已经构造好了，则从 workers 集合中移除这个 worker
workers.remove(w);
// 原子递减核心线程数（因为在 addWorker 方法中先做了原子增加）
decrementWorkerCount();
// 尝试结束线程池
tryTerminate();
} finally {
mainLock.unlock();
}
}
- Worker 类
我们发现 addWorker 方法只是构造了一个 Worker，并且把 firstTask 封装到 worker 中，它是做什么的呢？
每个 worker,都是一条线程,同时里面包含了一个 firstTask,即初始化时要被首先执行的任务.
最终执行任务的,是 runWorker()方法
Worker 类继承了 AQS，并实现了 Runnable 接口，注意其中的 firstTask 和 thread 属性：
firstTask 用它来保存传入的任务；thread 是在调用构造方法时通过 ThreadFactory 来创建的线程，是用来处理任务的线程。在调用构造方法时，需要传入任务，这里通过 getThreadFactory().newThread(this);来新建一个线程，newThread 方法传入的参数是 this，因为 Worker 本身继承了 Runnable 接口，也就是一个线程，所以一个 Worker 对象在启动的时候会调用 Worker 类中的 run 方法。Worker 继承了 AQS，使用 AQS 来实现独占锁的功能。为什么不使用 ReentrantLock 来实现呢？
可以看到 tryAcquire 方法，它是不允许重入的，而 ReentrantLock 是允许重入的：
lock 方法一旦获取了独占锁，表示当前线程正在执行任务中；那么它会有以下几个作用
1） 如果正在执行任务，则不应该中断线程；
2.）如果该线程现在不是独占锁的状态，也就是空闲的状态，说明它没有在处理任务，这时可以对该线程进行中断；
3.）线程池在执行 shutdown 方法或 tryTerminate 方法时会调用 interruptIdleWorkers 方法来中断空闲的线程，interruptIdleWorkers 方法会使用 tryLock 方法来判断线程池中的线程
是否是空闲状态
4.）之所以设置为不可重入，是因为我们不希望任务在调用像 setCorePoolSize 这样的线程池控制方法时重新获取锁，这样会中断正在运行的线程
private final class Worker
extends AbstractQueuedSynchronizer
implements Runnable
{
private static final long serialVersionUID = 6138294804551838833L;
// 这才是真正执行task的线程，从构造函数可知是由ThreadFactury 创建的
final Thread thread;
// 这就是需要执行的task
Runnable firstTask;
// 完成的任务数，用于线程池统计
volatile long completedTasks;
Worker(Runnable firstTask) {
// 初始状态 -1, 防止在调用runWorker()，也就是真正执行task前中断thread
setState(-1); // inhibit interrupts until runWorker
this.firstTask = firstTask;
this.thread = getThreadFactory().newThread(this);
}
public void run() {
runWorker(this);
}
protected boolean isHeldExclusively() {
return getState() != 0;
}
protected boolean tryAcquire(int unused) {
if (compareAndSetState(0, 1)) {
setExclusiveOwnerThread(Thread.currentThread());
return true;
}
return false;
}
protected boolean tryRelease(int unused) {
setExclusiveOwnerThread(null);
setState(0);
return true;
}
public void lock() { acquire(1); }
public boolean tryLock() { return tryAcquire(1); }
public void unlock() { release(1); }
public boolean isLocked() { return isHeldExclusively(); }
void interruptIfStarted() {
Thread t;
if (getState() >= 0 && (t = thread) != null && !t.isInterrupted()) {
try {
t.interrupt();
} catch (SecurityException ignore) {
}
}
}
}
- void runWorker(Worker w)；
if (workerAdded) {
//启动线程
t.start();
workerStarted = true;
}
t.start();后执行Worker类中的run()方法
public void run() {
runWorker(this);
}
这个方法主要做几件事：
1）如果 task 不为空,则开始执行 task
2）如果 task 为空,则通过 getTask()再去取任务,并赋值给 task,如果取到的 Runnable 不为空,则执行该任务
3）执行完毕后,通过 while 循环继续 getTask()取任务
4）如果 getTask()取到的任务依然是空,那么整个 runWorker()方法执行完毕
// 这个方法主要做几件事：
// 1. 如果 task 不为空,则开始执行 task
// 2. 如果 task 为空,则通过 getTask()再去取任务,并赋值给 task,如果取到的 Runnable 不为空,则执行该任务
// 3. 执行完毕后,通过 while 循环继续 getTask()取任务
// 4. 如果 getTask()取到的任务依然是空,那么整个 runWorker()方法执行完毕
final void runWorker(Worker w) {
Thread wt = Thread.currentThread();
Runnable task = w.firstTask;
w.firstTask = null;
// unlock，表示当前 worker 线程允许中断，因为 new Worker 默认的 state=-1,
// 此处是调用Worker类的tryRelease()方法，将state置为0，而interruptIfStarted()中只有 state>=0 才允许调用中断
w.unlock(); // allow interrupts
boolean completedAbruptly = true;
try {
// 这个 while 循环,在这里实现了线程复用,如果task为空，则通过getTask来获取任务
while (task != null || (task = getTask()) != null) {
//上锁，不是为了防止并发执行任务，为了在 shutdown()时不终止正在运行的 worker
w.lock();
// If pool is stopping, ensure thread is interrupted;
// if not, ensure thread is not interrupted. This
// requires a recheck in second case to deal with
// shutdownNow race while clearing interrupt
// 线程池为stop状态时不接受新任务，不执行已经加入任务队列的任务，还中断正在执行的任务
// 所以对于 stop 状态以上是要中断线程的(Thread.interrupted() &&runStateAtLeast(ctl.get(), STOP) 确保线
// 程中断标志位为true且是stop状态以上,接着清除了中断标志
// !wt.isInterrupted() 则再一次检查保证线程需要设置中断标志位
if ((runStateAtLeast(ctl.get(), STOP) ||
(Thread.interrupted() &&
runStateAtLeast(ctl.get(), STOP))) &&
!wt.isInterrupted())
wt.interrupt();
try {
//这里默认是没有实现的，在一些特定的场景中我们可以自己继承ThreadpoolExecutor自己重写
beforeExecute(wt, task);
Throwable thrown = null;
try {
//执行任务中的 run 方法
task.run();
} catch (RuntimeException x) {
thrown = x; throw x;
} catch (Error x) {
thrown = x; throw x;
} catch (Throwable x) {
thrown = x; throw new Error(x);
} finally {
afterExecute(task, thrown);
}
} finally {
//置空任务(这样下次循环开始时,task 依然为 null,需要再通过getTask()取) + 记录该Worker完成任务数量 + 解锁
task = null;
w.completedTasks++;
w.unlock();
}
}
completedAbruptly = false;
} finally {
//1.将入参 worker 从数组 workers 里删除掉；
//2.根据布尔值 allowCoreThreadTimeOut 来决定是否补充新的 Worker 进数组workers
processWorkerExit(w, completedAbruptly);
}
}
- Runnable getTask()；
// worker 线程会从阻塞队列中获取需要执行的任务，这个方法不是简单的 take 数据
// 怎样判断线程有多久没有活动了?
// 其实只是在线程从工作队列 poll 任务时，加上了超时限制，
// 如果线程在 keepAliveTime 的时间内 poll 不到任务，那我就认为这条线程没事做，可以干掉了
private Runnable getTask() {
boolean timedOut = false; // Did the last poll() time out?
for (;;) {
int c = ctl.get();
int rs = runStateOf(c);
// 对线程池状态的判断，两种情况会 workerCount-1，并且返回 null
// 1. 线程池状态为shutdown，且workQueue为空（反映了 shutdown 状态的线程池还是要执行workQueue中剩余的任务的）
// 2. 线程池状态为 stop（shutdownNow()会导致变成 STOP）（此时不用考虑 workQueue的情况)
// Check if queue empty only if necessary.
if (rs >= SHUTDOWN && (rs >= STOP || workQueue.isEmpty())) {
decrementWorkerCount();
//返回 null，则当前 worker 线程会退出
return null;
}
int wc = workerCountOf(c);
// Are workers subject to culling?
// timed 变量用于判断是否需要进行超时控制。
// allowCoreThreadTimeOut 默认是 false，也就是核心线程不允许进行超时；
// wc > corePoolSize，表示当前线程池中的线程数量大于核心线程数量；
// 对于超过核心线程数量的这些线程，需要进行超时控制
boolean timed = allowCoreThreadTimeOut || wc > corePoolSize;
// 1. 线程数量超过 maximumPoolSize 可能是线程池在运行时被调用了 setMaximumPoolSize()
// 被改变了大小，否则已经 addWorker()成功不会超过 maximumPoolSize
// 2. timed && timedOut 如果为 true，表示当前操作需要进行超时控制，并且上次从阻塞队列中
// 获取任务发生了超时.其实就是体现了空闲线程的存活时间
if ((wc > maximumPoolSize || (timed && timedOut))
&& (wc > 1 || workQueue.isEmpty())) {
if (compareAndDecrementWorkerCount(c))
return null;
continue;
}
try {
// 根据 timed 来判断，如果为 true，则通过阻塞队列 poll 方法进行超时控制，如果在
// keepaliveTime 时间内没有获取到任务，则返回 null.否则通过 take 方法阻塞式获取队列中的任务
Runnable r = timed ?
workQueue.poll(keepAliveTime, TimeUnit.NANOSECONDS) :
workQueue.take();
//如果拿到的任务不为空，则直接返回给 worker 进行处理
if (r != null)
return r;
timedOut = true;
} catch (InterruptedException retry) {
// 如果获取任务时当前线程发生了中断，则设置 timedOut 为false 并返回循环重试
timedOut = false;
}
}
}
- void processWorkerExit(Worker w, boolean completedAbruptly)；
// 销毁工作线程
private void processWorkerExit(Worker w, boolean completedAbruptly) {
if (completedAbruptly) // If abrupt, then workerCount wasn't adjusted
decrementWorkerCount();
final ReentrantLock mainLock = this.mainLock;
mainLock.lock();
try {
completedTaskCount += w.completedTasks;
workers.remove(w);
} finally {
mainLock.unlock();
}
tryTerminate();
int c = ctl.get();
if (runStateLessThan(c, STOP)) {
if (!completedAbruptly) {
int min = allowCoreThreadTimeOut ? 0 : corePoolSize;
if (min == 0 && ! workQueue.isEmpty())
min = 1;
if (workerCountOf(c) >= min)
return; // replacement not needed
}
addWorker(null, false);
}
}
- void reject(Runnable command)；拒绝策略
1）AbortPolicy：直接抛出异常，默认策略；
2）CallerRunsPolicy：用调用者所在的线程来执行任务；
3）DiscardOldestPolicy：丢弃阻塞队列中靠最前的任务，并执行当前任务；
4）DiscardPolicy：直接丢弃任务；
当然也可以根据应用场景实现 RejectedExecutionHandler 接口，自定义饱和策略，如记录日志或持久化存储不能处理的任务
线程池的注意事项
阿里开发手册不建议使用线程池：线程池的构建不允许使用 Executors 去创建，而是通过 ThreadPoolExecutor 的方式
因为：用 Executors 使得用户不需要关心线程池的参数配置，意味着大家对于线程池的运行规则也会慢慢的忽略。这会导致一个问题，比如我们用 newFixdThreadPool 或者 singleThreadPool.允许的队列长度为Integer.MAX_VALUE，如果使用不当会导致大量请求堆积到队列中导致 OOM 的风险而 newCachedThreadPool，允许创建线程数量为 Integer.MAX_VALUE，也可能会导致大量线程的创建出现CPU使用过高或者OOM的问题。而如果我们通过 ThreadPoolExecutor 来构造线程池的话，我们势必要了解线程池构造中每个参数的具体含义，使得开发者在配置参数的时候能够更加谨慎。
如何合理配置线程池的大小？
- 需要分析线程池执行的任务的特性： CPU 密集型还是 IO 密集型
- 每个任务执行的平均时长大概是多少，这个任务的执行时长可能还跟任务处理逻辑是否涉及到网络传输以及底层系统资源依赖有关系
CPU 密集型：主要是执行计算任务，响应时间很快，cpu 一直在运行，这种任务 cpu
的利用率很高，那么线程数的配置应该根据 CPU 核心数来决定，CPU 核心数=最大同时执行线程数，加入 CPU 核心数为 4，那么服务器最多能同时执行 4 个线程。过多的线程会导致上下文切换反而使得效率降低。那线程池的最大线程数可以配置为 cpu 核心数+1。
IO 密集型：主要是进行 IO 操作，执行 IO 操作的时间较长，这是 cpu 出于空闲状态，
导致 cpu 的利用率不高，这种情况下可以增加线程池的大小。这种情况下可以结合线程的等待时长来做判断，等待时间越高，那么线程数也相对越多。一般可以配置 cpu 核心数的 2 倍。一个公式：线程池设定最佳线程数目 = （（线程池设定的线程等待时间+线程 CPU 时间）/ 线程 CPU 时间 ）* CPU 数目
这个公式的线程 cpu 时间是预估的程序单个线程在 cpu 上运行的时间（通常使用loadrunner测试大量运行次数求出平均值）
线程池中的线程初始化
默认情况下，创建线程池之后，线程池中是没有线程的，需要提交任务之后才会创建线程。在实际中如果需要线程池创建之后立即创建线程，可以通过以下两个方法办到：
prestartCoreThread()：初始化一个核心线程； prestartAllCoreThreads()：初始化所有核心线程
例：
ThreadPoolExecutor tpe=(ThreadPoolExecutor)service;
tpe.prestartAllCoreThreads();
线程池的关闭
ThreadPoolExecutor 提供了两个方法，用于线程池的关闭，分别是 shutdown()和
shutdownNow()，其中：shutdown()：不会立即终止线程池，而是要等所有任务缓存队列中的任务都执行完后才终止，但再也不会接受新的任务。shutdownNow()：立即终止线程池，并尝试打断正在执行的任务，并且清空任务缓存队列，返回尚未执行的任务。
线程池容量的动态调
ThreadPoolExecutor 提供了动态调整线程池容量大小的方法： setCorePoolSize()和
setMaximumPoolSize()。
setCorePoolSize：设置核心池大小
setMaximumPoolSize：设置线程池最大能创建的线程数目大小
任务缓存队列及排队策略
即 workQueue，它用来存放等待执行的任务。
workQueue 的类型为 BlockingQueue，通常可以取下面三种类型：
- ArrayBlockingQueue：基于数组的先进先出队列，此队列创建时必须指定大小；
- LinkedBlockingQueue：基于链表的先进先出队列，如果创建时没有指定此队列大小，则默认为 Integer.MAX_VALUE；
- SynchronousQueue：这个队列比较特殊，它不会保存提交的任务，而是将直接新建一个线程来执行新来的任务
线程池的监控
如果在项目中大规模的使用了线程池，那么必须要有一套监控体系，来知道当前线程池的状态，当出现问题的时候可以快速定位到问题。而线程池提供了相应的扩展方法，我们通过重写线程池的 beforeExecute、afterExecute 和 shutdown 等方式就可以实现对线程的监控。
例：
public class ThreadPoolExecutorMonitoring extends ThreadPoolExecutor {
// 保存任务开始执行的时间 , 当任务结束时 , 用任务结束时间减去开始时间计算任务执行时间
private ConcurrentHashMap<String, Date> startTimes;
public ThreadPoolExecutorMonitoring(int corePoolSize, int maximumPoolSize, long
keepAliveTime, TimeUnit unit, BlockingQueue<Runnable> workQueue) {
super(corePoolSize, maximumPoolSize, keepAliveTime, unit, workQueue);
this.startTimes = new ConcurrentHashMap<>();
}
@Override
public void shutdown() {
System.out.println(" 已经执行的任务数："
+ this.getCompletedTaskCount() + ","
+ " 当前活动线程数:" + this.getActiveCount()
+ ", 当前排队线程数:" + this.getQueue().size());
System.out.println();
super.shutdown();
}
// 任务开始之前记录任务开始时间
@Override
protected void beforeExecute(Thread t, Runnable r) {
startTimes.put(String.valueOf(r.hashCode()), new Date());
super.beforeExecute(t, r);
}
@Override
protected void afterExecute(Runnable r, Throwable t) {
Date startDate = startTimes.remove(String.valueOf(r.hashCode()));
Date finishDate = new Date();
long diff = finishDate.getTime() - startDate.getTime();
// 统计任务耗时、初始线程数、核心线程数、正在执行的任务数量、
// 已完成任务数量、任务总数、队列里缓存的任务数量、
// 池中存在的最大线程数、最大允许的线程数、线程空闲时间、线程池是否关闭、线程池是否终止
System.out.print(" 任务耗时:" + diff + "\n");
System.out.print(" 初始线程数:" + this.getPoolSize() + "\n");
System.out.print(" 核心线程数:" + this.getCorePoolSize() + "\n");
System.out.print(" 正在执行的任务数量:" + this.getActiveCount() + "\n");
System.out.print(" 已经执行的任务数:" + this.getCompletedTaskCount() + "\n");
System.out.print(" 任务总数:" + this.getTaskCount() + "\n");
System.out.print(" 最大允许的线程数:" + this.getMaximumPoolSize() + "\n");
System.out.print(" 线程空闲时间:" + this.getKeepAliveTime(TimeUnit.MILLISECONDS) + "\n");
System.out.println();
super.afterExecute(r, t);
}
public static ExecutorService newCachedThreadPool() {
return new ThreadPoolExecutorMonitoring(0, Integer.MAX_VALUE,
60L, TimeUnit.SECONDS, new SynchronousQueue());
}
}
public class TestMonitoring implements Runnable {
private static ExecutorService es = ThreadPoolExecutorMonitoring.newCachedThreadPool();
@Override
public void run() {
try {
Thread.sleep(1000);
} catch (InterruptedException e) {
e.printStackTrace();
}
}
public static void main(String[] args) throws Exception {
for (int i = 0; i < 100; i++) {
es.execute(new TestMonitoring());
}
es.shutdown();
}
}
扫一扫
6677
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
