java高并发系列 - 第18天:JAVA线程池,这一篇就够了

new ArrayBlockingQueue<Runnable>(10),

Executors.defaultThreadFactory(),

new ThreadPoolExecutor.AbortPolicy());

public static void main(String[] args) {

for (int i = 0; i < 10; i++) {

int j = i;

String taskName = “任务” + j;

executor.execute(() -> {

//模拟任务内部处理耗时

try {

TimeUnit.SECONDS.sleep(j);

} catch (InterruptedException e) {

e.printStackTrace();

}

System.out.println(Thread.currentThread().getName() + taskName + “处理完毕”);

});

}

//关闭线程池

executor.shutdown();

}

}

输出:

pool-1-thread-1任务0处理完毕

pool-1-thread-2任务1处理完毕

pool-1-thread-3任务2处理完毕

pool-1-thread-1任务3处理完毕

pool-1-thread-2任务4处理完毕

pool-1-thread-3任务5处理完毕

pool-1-thread-1任务6处理完毕

pool-1-thread-2任务7处理完毕

pool-1-thread-3任务8处理完毕

pool-1-thread-1任务9处理完毕

线程池中常见5种工作队列


任务太多的时候,工作队列用于暂时缓存待处理的任务,jdk中常见的5种阻塞队列:

ArrayBlockingQueue:是一个基于数组结构的有界阻塞队列,此队列按照先进先出原则对元素进行排序

LinkedBlockingQueue:是一个基于链表结构的阻塞队列,此队列按照先进先出排序元素,吞吐量通常要高于ArrayBlockingQueue。静态工厂方法Executors.newFixedThreadPool使用了这个队列。

SynchronousQueue :一个不存储元素的阻塞队列,每个插入操作必须等到另外一个线程调用移除操作,否则插入操作一直处理阻塞状态,吞吐量通常要高于LinkedBlockingQueue,静态工厂方法Executors.newCachedThreadPool使用这个队列

PriorityBlockingQueue:优先级队列,进入队列的元素按照优先级会进行排序

前2种队列相关示例就不说了,主要说一下后面2种队列的使用示例。

SynchronousQueue队列的线程池


package com.itsoku.chat16;

import java.util.concurrent.*;

/**

* 跟着阿里p7学并发,微信公众号:javacode2018

*/

public class Demo2 {

public static void main(String[] args) {

ExecutorService executor = Executors.newCachedThreadPool();

for (int i = 0; i < 50; i++) {

int j = i;

String taskName = “任务” + j;

executor.execute(() -> {

System.out.println(Thread.currentThread().getName() + “处理” + taskName);

//模拟任务内部处理耗时

try {

TimeUnit.SECONDS.sleep(1);

} catch (InterruptedException e) {

e.printStackTrace();

}

});

}

executor.shutdown();

}

}

pool-1-thread-1处理任务0

pool-1-thread-2处理任务1

pool-1-thread-3处理任务2

pool-1-thread-6处理任务5

pool-1-thread-7处理任务6

pool-1-thread-4处理任务3

pool-1-thread-5处理任务4

pool-1-thread-8处理任务7

pool-1-thread-9处理任务8

pool-1-thread-10处理任务9

pool-1-thread-11处理任务10

pool-1-thread-12处理任务11

pool-1-thread-13处理任务12

pool-1-thread-14处理任务13

pool-1-thread-15处理任务14

pool-1-thread-16处理任务15

pool-1-thread-17处理任务16

pool-1-thread-18处理任务17

pool-1-thread-19处理任务18

pool-1-thread-20处理任务19

pool-1-thread-21处理任务20

pool-1-thread-25处理任务24

pool-1-thread-24处理任务23

pool-1-thread-23处理任务22

pool-1-thread-22处理任务21

pool-1-thread-26处理任务25

pool-1-thread-27处理任务26

pool-1-thread-28处理任务27

pool-1-thread-30处理任务29

pool-1-thread-29处理任务28

pool-1-thread-31处理任务30

pool-1-thread-32处理任务31

pool-1-thread-33处理任务32

pool-1-thread-38处理任务37

pool-1-thread-35处理任务34

pool-1-thread-36处理任务35

pool-1-thread-41处理任务40

pool-1-thread-34处理任务33

pool-1-thread-39处理任务38

pool-1-thread-40处理任务39

pool-1-thread-37处理任务36

pool-1-thread-42处理任务41

pool-1-thread-43处理任务42

pool-1-thread-45处理任务44

pool-1-thread-46处理任务45

pool-1-thread-44处理任务43

pool-1-thread-47处理任务46

pool-1-thread-50处理任务49

pool-1-thread-48处理任务47

pool-1-thread-49处理任务48

代码中使用Executors.newCachedThreadPool()创建线程池,看一下的源码:

public static ExecutorService newCachedThreadPool() {

return new ThreadPoolExecutor(0, Integer.MAX_VALUE,

60L, TimeUnit.SECONDS,

new SynchronousQueue<Runnable>());

}

从输出中可以看出,系统创建了50个线程处理任务,代码中使用了SynchronousQueue同步队列,这种队列比较特殊,放入元素必须要有另外一个线程去获取这个元素,否则放入元素会失败或者一直阻塞在那里直到有线程取走,示例中任务处理休眠了指定的时间,导致已创建的工作线程都忙于处理任务,所以新来任务之后,将任务丢入同步队列会失败,丢入队列失败之后,会尝试新建线程处理任务。使用上面的方式创建线程池需要注意,如果需要处理的任务比较耗时,会导致新来的任务都会创建新的线程进行处理,可能会导致创建非常多的线程,最终耗尽系统资源,触发OOM。

PriorityBlockingQueue优先级队列的线程池


package com.itsoku.chat16;

import java.util.concurrent.*;

/**

* 跟着阿里p7学并发,微信公众号:javacode2018

*/

public class Demo3 {

static class Task implements Runnable, Comparable<Task> {

private int i;

private String name;

public Task(int i, String name) {

this.i = i;

this.name = name;

}

@Override

public void run() {

System.out.println(Thread.currentThread().getName() + “处理” + this.name);

}

@Override

public int compareTo(Task o) {

return Integer.compare(o.i, this.i);

}

}

public static void main(String[] args) {

ExecutorService executor = new ThreadPoolExecutor(1, 1,

60L, TimeUnit.SECONDS,

new PriorityBlockingQueue());

for (int i = 0; i < 10; i++) {

String taskName = “任务” + i;

executor.execute(new Task(i, taskName));

}

for (int i = 100; i >= 90; i–) {

String taskName = “任务” + i;

executor.execute(new Task(i, taskName));

}

executor.shutdown();

}

}

输出:

pool-1-thread-1处理任务0

pool-1-thread-1处理任务100

pool-1-thread-1处理任务99

pool-1-thread-1处理任务98

pool-1-thread-1处理任务97

pool-1-thread-1处理任务96

pool-1-thread-1处理任务95

pool-1-thread-1处理任务94

pool-1-thread-1处理任务93

pool-1-thread-1处理任务92

pool-1-thread-1处理任务91

pool-1-thread-1处理任务90

pool-1-thread-1处理任务9

pool-1-thread-1处理任务8

pool-1-thread-1处理任务7

pool-1-thread-1处理任务6

pool-1-thread-1处理任务5

pool-1-thread-1处理任务4

pool-1-thread-1处理任务3

pool-1-thread-1处理任务2

pool-1-thread-1处理任务1

输出中,除了第一个任务,其他任务按照优先级高低按顺序处理。原因在于:创建线程池的时候使用了优先级队列,进入队列中的任务会进行排序,任务的先后顺序由Task中的i变量决定。向PriorityBlockingQueue加入元素的时候,内部会调用代码中Task的compareTo方法决定元素的先后顺序。

自定义创建线程的工厂


给线程池中线程起一个有意义的名字,在系统出现问题的时候,通过线程堆栈信息可以更容易发现系统中问题所在。自定义创建工厂需要实现java.util.concurrent.ThreadFactory接口中的Thread newThread(Runnable r)方法,参数为传入的任务,需要返回一个工作线程。

示例代码:

package com.itsoku.chat16;

import java.util.concurrent.*;

import java.util.concurrent.atomic.AtomicInteger;

/**

* <b>description</b>: <br>

* <b>time</b>:2019/7/28 21:01 <br>

* <b>author</b>:ready likun_557@163.com

*/

public class Demo4 {

static AtomicInteger threadNum = new AtomicInteger(1);

public static void main(String[] args) {

ThreadPoolExecutor executor = new ThreadPoolExecutor(5, 5,

60L, TimeUnit.SECONDS,

new ArrayBlockingQueue<Runnable>(10), r -> {

Thread thread = new Thread®;

thread.setName(“自定义线程-” + threadNum.getAndIncrement());

return thread;

});

for (int i = 0; i < 5; i++) {

String taskName = “任务-” + i;

executor.execute(() -> {

System.out.println(Thread.currentThread().getName() + “处理” + taskName);

});

}

executor.shutdown();

}

}

输出:

自定义线程-1处理任务-0

自定义线程-3处理任务-2

自定义线程-2处理任务-1

自定义线程-4处理任务-3

自定义线程-5处理任务-4

代码中在任务中输出了当前线程的名称,可以看到是我们自定义的名称。

通过jstack查看线程的堆栈信息,也可以看到我们自定义的名称,我们可以将代码中executor.shutdown();先给注释掉让程序先不退出,然后通过jstack查看,如下:

640?wx_fmt=png

4种常见饱和策略


当线程池中队列已满,并且线程池已达到最大线程数,线程池会将任务传递给饱和策略进行处理。这些策略都实现了RejectedExecutionHandler接口。接口中有个方法:

void rejectedExecution(Runnable r, ThreadPoolExecutor executor)

参数说明:

r:需要执行的任务

executor:当前线程池对象

JDK中提供了4种常见的饱和策略:

AbortPolicy:直接抛出异常

CallerRunsPolicy:在当前调用者的线程中运行任务,即随丢来的任务,由他自己去处理

DiscardOldestPolicy:丢弃队列中最老的一个任务,即丢弃队列头部的一个任务,然后执行当前传入的任务

DiscardPolicy:不处理,直接丢弃掉,方法内部为空

自定义饱和策略


需要实现RejectedExecutionHandler接口。任务无法处理的时候,我们想记录一下日志,我们需要自定义一个饱和策略,示例代码:

package com.itsoku.chat16;

import java.util.concurrent.ArrayBlockingQueue;

import java.util.concurrent.Executors;

import java.util.concurrent.ThreadPoolExecutor;

import java.util.concurrent.TimeUnit;

import java.util.concurrent.atomic.AtomicInteger;

/**

* 跟着阿里p7学并发,微信公众号:javacode2018

*/

public class Demo5 {

static class Task implements Runnable {

String name;

public Task(String name) {

this.name = name;

}

@Override

public void run() {

System.out.println(Thread.currentThread().getName() + “处理” + this.name);

try {

TimeUnit.SECONDS.sleep(5);

} catch (InterruptedException e) {

e.printStackTrace();

}

}

@Override

public String toString() {

return “Task{” +

“name='” + name + ‘’’ +

‘}’;

}

}

public static void main(String[] args) {

ThreadPoolExecutor executor = new ThreadPoolExecutor(1,

1,

60L,

TimeUnit.SECONDS,

new ArrayBlockingQueue<Runnable>(1),

Executors.defaultThreadFactory(),

(r, executors) -> {

//自定义饱和策略

//记录一下无法处理的任务

System.out.println(“无法处理的任务:” + r.toString());

});

for (int i = 0; i < 5; i++) {

executor.execute(new Task(“任务-” + i));

}

executor.shutdown();

}

}

输出:

无法处理的任务:Task{name=‘任务-2’}

无法处理的任务:Task{name=‘任务-3’}

pool-1-thread-1处理任务-0

无法处理的任务:Task{name=‘任务-4’}

pool-1-thread-1处理任务-1

输出结果中可以看到有3个任务进入了饱和策略中,记录了任务的日志,对于无法处理多任务,我们最好能够记录一下,让开发人员能够知道。任务进入了饱和策略,说明线程池的配置可能不是太合理,或者机器的性能有限,需要做一些优化调整。

线程池中的2个关闭方法


线程池提供了2个关闭方法:shutdownshutdownNow,当调用者两个方法之后,线程池会遍历内部的工作线程,然后调用每个工作线程的interrrupt方法给线程发送中断信号,内部如果无法响应中断信号的可能永远无法终止,所以如果内部有无线循环的,最好在循环内部检测一下线程的中断信号,合理的退出。调用者两个方法中任意一个,线程池的isShutdown方法就会返回true,当所有的任务线程都关闭之后,才表示线程池关闭成功,这时调用isTerminaed方法会返回true。

调用shutdown方法之后,线程池将不再接口新任务,内部会将所有已提交的任务处理完毕,处理完毕之后,工作线程自动退出。

而调用shutdownNow方法后,线程池会将还未处理的(在队里等待处理的任务)任务移除,将正在处理中的处理完毕之后,工作线程自动退出。

至于调用哪个方法来关闭线程,应该由提交到线程池的任务特性决定,多数情况下调用shutdown方法来关闭线程池,如果任务不一定要执行完,则可以调用shutdownNow方法。

扩展线程池


虽然jdk提供了ThreadPoolExecutor这个高性能线程池,但是如果我们自己想在这个线程池上面做一些扩展,比如,监控每个任务执行的开始时间,结束时间,或者一些其他自定义的功能,我们应该怎么办?

这个jdk已经帮我们想到了,ThreadPoolExecutor内部提供了几个方法beforeExecuteafterExecuteterminated,可以由开发人员自己去这些方法。看一下线程池内部的源码:

try {

beforeExecute(wt, task);//任务执行之前调用的方法

Throwable thrown = null;

try {

task.run();

} catch (RuntimeException x) {

thrown = x;

throw x;

} catch (Error x) {

thrown = x;

throw x;

} catch (Throwable x) {

thrown = x;

throw new Error(x);

} finally {

afterExecute(task, thrown);//任务执行完毕之后调用的方法

}

} finally {

task = null;

w.completedTasks++;

w.unlock();

}

beforeExecute:任务执行之前调用的方法,有2个参数,第1个参数是执行任务的线程,第2个参数是任务

protected void beforeExecute(Thread t, Runnable r) { }

afterExecute:任务执行完成之后调用的方法,2个参数,第1个参数表示任务,第2个参数表示任务执行时的异常信息,如果无异常,第二个参数为null

protected void afterExecute(Runnable r, Throwable t) { }

terminated:线程池最终关闭之后调用的方法。所有的工作线程都退出了,最终线程池会退出,退出时调用该方法

示例代码:

package com.itsoku.chat16;

import java.util.concurrent.ArrayBlockingQueue;

import java.util.concurrent.Executors;

import java.util.concurrent.ThreadPoolExecutor;

import java.util.concurrent.TimeUnit;

/**

* 跟着阿里p7学并发,微信公众号:javacode2018

*/

public class Demo6 {

static class Task implements Runnable {

String name;

public Task(String name) {

this.name = name;

}

@Override

public void run() {

System.out.println(Thread.currentThread().getName() + “处理” + this.name);

try {

TimeUnit.SECONDS.sleep(2);

} catch (InterruptedException e) {

e.printStackTrace();

}

}

@Override

public String toString() {

return “Task{” +

“name='” + name + ‘’’ +

‘}’;

}

}

public static void main(String[] args) throws InterruptedException {

ThreadPoolExecutor executor = new ThreadPoolExecutor(10,

10,

60L,

TimeUnit.SECONDS,

new ArrayBlockingQueue<Runnable>(1),

Executors.defaultThreadFactory(),

(r, executors) -> {

//自定义饱和策略

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Java工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!

如果你觉得这些内容对你有帮助,可以扫码获取!!(备注Java获取)

img

笔者福利

以下是小编自己针对马上即将到来的金九银十准备的一套“面试宝典”,不管是技术还是HR的问题都有针对性的回答。

有了这个,面试踩雷?不存在的!

回馈粉丝,诚意满满!!!




《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!
阿里一直到现在。**

深知大多数Java工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。[外链图片转存中…(img-RL2OMjaF-1713204435728)]

[外链图片转存中…(img-pzbtRxUj-1713204435728)]

[外链图片转存中…(img-hoj5dkke-1713204435729)]

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!

如果你觉得这些内容对你有帮助,可以扫码获取!!(备注Java获取)

img

笔者福利

以下是小编自己针对马上即将到来的金九银十准备的一套“面试宝典”,不管是技术还是HR的问题都有针对性的回答。

有了这个,面试踩雷?不存在的!

回馈粉丝,诚意满满!!!

[外链图片转存中…(img-Ku6pDPCO-1713204435729)]
[外链图片转存中…(img-rbtpHJmS-1713204435729)]
[外链图片转存中…(img-8Tz8gr6S-1713204435729)]
[外链图片转存中…(img-M3mfSzxA-1713204435730)]

《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!

  • 3
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值