多线程基础补充
1.并行与并发
- 并行:同一时刻,可以同时处理事情的能力
- 并发:与单位时间相关,在单位时间内可以处理事情的能力
2.怎么样才能让Java里的线程安全停止工作呢
线程自然终止:自然执行完或抛出未处理异常
stop(),resume(),suspend()已不建议使用,stop()会导致线程不会正确释放资源,suspend()容易导致死锁。
java线程是协作式,而非抢占式
调用一个线程的interrupt() 方法中断一个线程,并不是强行关闭这个线程,只是跟这个线程打个招呼,将线程的中断标志位置为true,
线程是否中断,由线程本身决定。
isInterrupted() 判定当前线程是否处于中断状态。
static方法interrupted() 判定当前线程是否处于中断状态,同时中断标志位改为false。
方法里如果抛出InterruptedException,线程的中断标志位会被复位成false,如果确实是需要中断线程,要求我们自己在catch语句块里再次调用interrupt()。
3.Thread的中断机制
中断线程
线程的thread.interrupt()方法是中断线程,将会设置该线程的中断状态位,即设置为true,
中断的结果线程是死亡、还是等待新的任务或是继续运行至下一步,就取决于这个程序本身。
线程会不时地检测这个中断标示位,以判断线程是否应该被中断(中断标示值是否为true)。它并不像stop方法那样会中断一个正在运行的线程。
判断线程是否被中断
判断某个线程是否已被发送过中断请求,请使用Thread.currentThread().isInterrupted()方法(因为它将线程中断标示位设置为true后,不会立刻清除中断标示位,即不会将中断标设置为false),而不要使用thread.interrupted()(该方法调用后会将中断标示位清除,即重新设置为false)方法来判断,下面是线程在循环中时的中断方式:
while(!Thread.currentThread().isInterrupted() && more work to do){
do more work
}
如何中断线程
如果一个线程处于了阻塞状态(如线程调用了thread.sleep、thread.join、thread.wait、condition.await、以及可中断的通道上的 I/O 操作方法后可进入阻塞状态),则在线程在检查中断标示时如果发现中断标示为true,则会在这些阻塞方法(sleep、join、wait、condition.await及可中断的通道上的 I/O 操作方法)调用处抛出InterruptedException异常,并且在抛出异常后立即将线程的中断标示位清除,即重新设置为false。抛出异常是为了线程从阻塞状态醒过来,并在结束线程前让程序员有足够的时间来处理中断请求。
注,synchronized在获锁的过程中是不能被中断的,意思是说如果产生了死锁,则不可能被中断(请参考后面的测试例子)。与synchronized功能相似的reentrantLock.lock()方法也是一样,它也不可中断的,即如果发生死锁,那么reentrantLock.lock()方法无法终止,如果调用时被阻塞,则它一直阻塞到它获取到锁为止。但是如果调用带超时的tryLock方法reentrantLock.tryLock(long timeout, TimeUnit unit),那么如果线程在等待时被中断,将抛出一个InterruptedException异常,这是一个非常有用的特性,因为它允许程序打破死锁。你也可以调用reentrantLock.lockInterruptibly()方法,它就相当于一个超时设为无限的tryLock方法。
没有任何语言方面的需求一个被中断的线程应该终止。中断一个线程只是为了引起该线程的注意,被中断线程可以决定如何应对中断。某些线程非常重要,以至于它们应该不理会中断,而是在处理完抛出的异常之后继续执行,但是更普遍的情况是,一个线程将把中断看作一个终止请求,这种线程的run方法遵循如下形式:
public void run() {
try {
...
/*
* 不管循环里是否调用过线程阻塞的方法如sleep、join、wait,这里还是需要加上
* !Thread.currentThread().isInterrupted()条件,虽然抛出异常后退出了循环,显
* 得用阻塞的情况下是多余的,但如果调用了阻塞方法但没有阻塞时,这样会更安全、更及时。
*/
while (!Thread.currentThread().isInterrupted()&& more work to do) {
do more work
}
} catch (InterruptedException e) {
//线程在wait或sleep期间被中断了
} finally {
//线程结束前做一些清理工作
}
}
上面是while循环在try块里,如果try在while循环里时,因该在catch块里重新设置一下中断标示,因为抛出InterruptedException异常后,中断标示位会自动清除,此时应该这样:
public void run() {
while (!Thread.currentThread().isInterrupted()&& more work to do) {
try {
...
sleep(delay);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();//重新设置中断标示
}
}
}
底层中断异常处理方式
另外不要在你的底层代码里捕获InterruptedException异常后不处理,会处理不当,如下:
void mySubTask(){
...
try{
sleep(delay);
}catch(InterruptedException e){}//不要这样做
...
}
如果你不知道抛InterruptedException异常后如何处理,那么你有如下好的建议处理方式:
- 1、在catch子句中,调用Thread.currentThread.interrupt()来设置中断状态(因为抛出异常后中断标示会被清除),让外界通过判断Thread.currentThread().isInterrupted()标示来决定是否终止线程还是继续下去,应该这样做:
void mySubTask() {
...
try {
sleep(delay);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
...
}
- 2、或者,更好的做法就是,不使用try来捕获这样的异常,让方法直接抛出:
void mySubTask() throws InterruptedException {
...
sleep(delay);
...
}
中断应用
使用中断信号量中断非阻塞状态的线程
中断线程最好的,最受推荐的方式是,使用共享变量(shared variable)发出信号,告诉线程必须停止正在运行的任务。线程必须周期性的核查这一变量,然后有秩序地中止任务。Example2描述了这一方式:
class Example2 extends Thread {
volatile boolean stop = false;// 线程中断信号量
public static void main(String args[]) throws Exception {
Example2 thread = new Example2();
System.out.println("Starting thread...");
thread.start();
Thread.sleep(3000);
System.out.println("Asking thread to stop...");
// 设置中断信号量
thread.stop = true;
Thread.sleep(3000);
System.out.println("Stopping application...");
}
public void run() {
// 每隔一秒检测一下中断信号量
while (!stop) {
System.out.println("Thread is running...");
long time = System.currentTimeMillis();
/*
* 使用while循环模拟 sleep 方法,这里不要使用sleep,否则在阻塞时会 抛
* InterruptedException异常而退出循环,这样while检测stop条件就不会执行,
* 失去了意义。
*/
while ((System.currentTimeMillis() - time < 1000)) {}
}
System.out.println("Thread exiting under request...");
}
}
使用thread.interrupt()中断非阻塞状态线程
虽然Example2该方法要求一些编码,但并不难实现。同时,它给予线程机会进行必要的清理工作。这里需注意一点的是需将共享变量定义成volatile 类型或将对它的一切访问封入同步的块/方法(synchronized blocks/methods)中。上面是中断一个非阻塞状态的线程的常见做法,但对非检测isInterrupted()条件会更简洁:
class Example2 extends Thread {
public static void main(String args[]) throws Exception {
Example2 thread = new Example2();
System.out.println("Starting thread...");
thread.start();
Thread.sleep(3000);
System.out.println("Asking thread to stop...");
// 发出中断请求
thread.interrupt();
Thread.sleep(3000);
System.out.println("Stopping application...");
}
public void run() {
// 每隔一秒检测是否设置了中断标示
while (!Thread.currentThread().isInterrupted()) {
System.out.println("Thread is running...");
long time = System.currentTimeMillis();
// 使用while循环模拟 sleep
while ((System.currentTimeMillis() - time < 1000) ) {
}
}
System.out.println("Thread exiting under request...");
}
}
到目前为止一切顺利!但是,当线程等待某些事件发生而被阻塞,又会发生什么?当然,如果线程被阻塞,它便不能核查共享变量,也就不能停止。这在许多情况下会发生,例如调用Object.wait()、ServerSocket.accept()和DatagramSocket.receive()时,这里仅举出一些。
他们都可能永久的阻塞线程。即使发生超时,在超时期满之前持续等待也是不可行和不适当的,所以,要使用某种机制使得线程更早地退出被阻塞的状态。下面就来看一下中断阻塞线程技术。
使用thread.interrupt()中断阻塞状态线程
Thread.interrupt()方法不会中断一个正在运行的线程。这一方法实际上完成的是,设置线程的中断标示位,在线程受到阻塞的地方(如调用sleep、wait、join等地方)抛出一个异常InterruptedException,并且中断状态也将被清除,这样线程就得以退出阻塞的状态。下面是具体实现:
class Example3 extends Thread {
public static void main(String args[]) throws Exception {
Example3 thread = new Example3();
System.out.println("Starting thread...");
thread.start();
Thread.sleep(3000);
System.out.println("Asking thread to stop...");
thread.interrupt();// 等中断信号量设置后再调用
Thread.sleep(3000);
System.out.println("Stopping application...");
}
public void run() {
while (!Thread.currentThread().isInterrupted()) {
System.out.println("Thread running...");
try {
/*
* 如果线程阻塞,将不会去检查中断信号量stop变量,所 以thread.interrupt()
* 会使阻塞线程从阻塞的地方抛出异常,让阻塞线程从阻塞状态逃离出来,并
* 进行异常块进行 相应的处理
*/
Thread.sleep(1000);// 线程阻塞,如果线程收到中断操作信号将抛出异常
} catch (InterruptedException e) {
System.out.println("Thread interrupted...");
/*
* 如果线程在调用 Object.wait()方法,或者该类的 join() 、sleep()方法
* 过程中受阻,则其中断状态将被清除
*/
System.out.println(this.isInterrupted());// false
//中不中断由自己决定,如果需要真真中断线程,则需要重新设置中断位,如果
//不需要,则不用调用
Thread.currentThread().interrupt();
}
}
System.out.println("Thread exiting under request...");
}
}
一旦Example3中的Thread.interrupt()被调用,线程便收到一个异常,于是逃离了阻塞状态并确定应该停止。上面我们还可以使用共享信号量来替换!Thread.currentThread().isInterrupted()条件,但不如它简洁。
4.等待/通知的标准范式
等待方:
- 1、 获取对象的锁;
- 2、 循环里判断条件是否满足,不满足调用wait方法,
- 3、 条件满足执行业务逻辑
通知方来说
- 1、 获取对象的锁;
- 2、 改变条件
- 3、 通知所有等待在对象的线程
notify和notifyAll应该用谁?
- 应该尽量使用notifyAll,使用notify因为有可能发生信号丢失的的情况
举例:
package com.zava.waitnotify;
/**
* 快递类
*
* @author Rab
* @date 2019-12-26 16:24
*
*/
public class Express {
//快递出发地
public final static String CITY = "上海";
//快递里程数
private Integer km;
//快递到达地点
private String site;
public Express() {
}
public Express(Integer km, String site) {
this.km = km;
this.site = site;
}
public synchronized void waitKm() throws InterruptedException{
while(this.km <= 100) {
Thread.sleep(100);
wait();
System.out.println("check km thread:" + Thread.currentThread().getId() + " is be notified");
}
System.out.println("the km is:" + this.km + ",I will change db");
}
public synchronized void waitSite() throws InterruptedException{
while(CITY.equals(this.site)) {
wait();
System.out.println("check site thread:" + Thread.currentThread().getId() + " is be notified");
}
System.out.println("the site is:" + this.site + ",I will call user");
}
public synchronized void changeKm() {
this.km = 101;
notifyAll();
}
public synchronized void changeSite() {
this.site = "Beijing";
notifyAll();
}
}
测试类
package com.zava.waitnotify;
public class TestExpress {
private static Express express = new Express(0, Express.CITY);
//检查里程数变化线程
private static class CheckKm extends Thread {
@Override
public void run() {
try {
express.waitKm();
} catch (InterruptedException e) {
interrupt();
e.printStackTrace();
}
}
}
private static class CheckSite extends Thread{
@Override
public void run() {
try {
express.waitSite();
} catch (InterruptedException e) {
interrupt();
e.printStackTrace();
}
}
}
public static void main(String[] args) {
for(int i = 0; i < 3; i++) {
new CheckSite().start();
}
for(int i = 0; i < 3; i++) {
new CheckKm().start();
}
express.changeKm();
}
}
5.等待超时模式的数据库连接池(wait/notify)
package com.zava.waitnotify;
import java.sql.Connection;
import java.util.LinkedList;
public class DBPool {
//数据库连接池的容器
private static LinkedList<Connection> pool = new LinkedList<>();
//初始化容器大小
public DBPool(int initalSize) {
if(initalSize > 0) {
for(int i = 0; i < initalSize; i++) {
pool.addLast(new SqlConnectImpl());
}
}
}
//获取连接
public Connection fetchConn(long mills) throws InterruptedException{
synchronized(pool) {
if(mills < 0) {
while(pool.isEmpty()){
wait();
}
return pool.removeFirst();
}else {
//最后的超时时间
long overTime = System.currentTimeMillis() + mills;
//剩下的等待时间
long remain = mills;
while(pool.isEmpty() && remain > 0) {
wait(remain);
remain = overTime - System.currentTimeMillis();
}
Connection conn = null;
if(!pool.isEmpty()) {
conn = pool.removeFirst();
}
return conn;
}
}
}
//释放连接
public void release(Connection conn) {
if(conn != null) {
synchronized (pool) {
pool.addLast(conn);
notifyAll();
}
}
}
}
6.Fork/join
6.1 Fork/join介绍
-
1.分而治之:规模为N的问题,N<阈值,直接解决,N>阈值,将N分解为K个小规模子问题,子问题互相对立,与原问题形式相同,将子问题的解合并得到原问题的解
-
2.动态规范:和分而治之不同的是,每个小任务之间互相联系。
-
3.工作密取:分而治之分割了每个任务之后,某个线程提前完成了任务,就会去其他线程偷取任务来完成,加快执行效率。同时,第一个分配的线程是从队列中的头部拿任务,当完成任务的线程去其他队列拿任务的时候是从尾部拿任务,所以这样就避免了竞争。
在Java的Fork/Join框架中,使用两个类完成上述操作:
1.ForkJoinTask:我们要使用Fork/Join框架,首先需要创建一个ForkJoin任务。该类提供了在任务中执行fork和join的机制。通常情况下我们不需要直接集成ForkJoinTask类,只需要继承它的子类,Fork/Join框架提供了两个子类:
a.RecursiveAction:用于没有返回结果的任务
b.RecursiveTask:用于有返回结果的任务
2.ForkJoinPool:ForkJoinTask需要通过ForkJoinPool来执行.他其实也是一个线程池。它使用了一个无限队列来保存需要执行的任务,而线程的数量则是通过构造函数传入,如果没有向构造函数中传入希望的线程数量,那么当前计算机可用的CPU数量会被设置为线程数量作为默认值。
注意:ForkJoinPool的invoke方法是同步阻塞的,excute方法是异步的。
6.2 Fork/Join框架的实现原理:
ForkJoinPool由ForkJoinTask数组和ForkJoinWorkerThread数组组成,ForkJoinTask数组负责将存放程序提交给ForkJoinPool,ForkJoinWorkerThread负责执行这些任务。
6.3 使用场景:
- Fork/Join框架适合能够进行拆分再合并的计算密集型(CPU密集型)任务。
- ForkJoin框架是一个并行框架,因此要求服务器拥有多CPU、多核,用以提高计算能力。
如果是单核、单CPU,不建议使用该框架,会带来额外的性能开销,反而比单线程的执行效率低。当然不是因为并行的任务会进行频繁的线程切换,因为Fork/Join框架在进行线程池初始化的时候默认线程数量为Runtime.getRuntime().availableProcessors(),单CPU单核的情况下只会产生一个线程,并不会造成线程切换,而是会增加Fork/Join框架的一些队列、池化的开销。
比如:数据迁移到数据库,解析excel等等可以拆分完成的任务都可以使用到forkjoin。
6.4 Fork/Join使用的标准范式
6.5 实战
6.5.1 累加一个整形数组
产生整形数组的工具类:
/**
* 产生整形数组
*/
public class MakeArray {
//数组长度
public static final int ARRAY_LENGTH = 4000;
public static int[] makeArray() {
//new一个随机数发生器
Random r = new Random();
int[] result = new int[ARRAY_LENGTH];
for (int i = 0; i < ARRAY_LENGTH; i++) {
//用随机数填充数组
result[i] = r.nextInt(ARRAY_LENGTH * 3);
}
return result;
}
}
继承RecursiveTask实现有返回值的任务计算:
public class SumArray {
//产生一个随机数组
private static int[] array = MakeArray.makeArray();
//阈值
private final static int POINT = MakeArray.ARRAY_LENGTH / 10;
//有返回值的任务
private static class SumTask extends RecursiveTask<Integer> {
//要累加的源数组
private int[] src;
//开始角标
private int startIndex;
//结束角标
private int endIndex;
public SumTask(int[] src, int startIndex, int endIndex) {
this.src = src;
this.startIndex = startIndex;
this.endIndex = endIndex;
}
//实现具体的累加逻辑和任务分割逻辑
@Override
protected Integer compute() {
//不满足阈值的时候,这里面的逻辑也是当满足阈值的时候,递归执行的逻辑
if (endIndex - startIndex < POINT) {
int count = 0;
for (int i = startIndex; i <= endIndex; i++) {
count += src[i];
// SleepTools.ms(1);
}
return count;
//满足阈值的时候,需要分割任务,然后交给forkjoinpool去执行任务
} else {
//当需要分割的时候,采用折中法进行分割
//startIndex.......mid.......endIndex
int mid = (startIndex + endIndex) / 2;
//左任务
SumTask leftTask = new SumTask(src, startIndex, mid);
//右任务
SumTask rigthTask = new SumTask(src, mid + 1, endIndex);
//交给forkjoinpool去执行任务
invokeAll(leftTask, rigthTask);
//将执行结果返回
return leftTask.join() + rigthTask.join();
}
}
}
private static void testForkJoin() {
//创建ForkJoinPool池
ForkJoinPool forkJoinPool = new ForkJoinPool();
long startTime = System.currentTimeMillis();
SumTask task = new SumTask(array, 0, array.length - 1);
//这个方法是阻塞的,是同步的
forkJoinPool.invoke(task);
long endTime = System.currentTimeMillis();
System.out.println("采用forkjoin执行结果是:" + task.join() + "---------用时:" + (endTime - startTime));
}
private static void testFor() {
long startTime = System.currentTimeMillis();
int count = 0;
for (int i = 0; i < array.length; i++) {
count += array[i];
// SleepTools.ms(1);
}
long endTime = System.currentTimeMillis();
System.out.println("采用for循环执行结果是:" + count + "---------用时:" + (endTime - startTime));
}
public static void main(String[] args) {
testForkJoin();
testFor();
}
}
6.5.2 遍历目录,搜寻目录下的所有文件
继承RecursiveAction实现无返回值的任务的执行:
public class FindFiles extends RecursiveAction {
//要搜寻的目录
private File dir;
public FindFiles(File dir) {
this.dir = dir;
}
@Override
protected void compute() {
File[] files = dir.listFiles();
if (files != null) {
List<FindFiles> list = new ArrayList<>();
for (File file : files) {
//如果是目录,就需要分割任务,交给ForkJoinPool去执行,因为任务数目不确定,所以需要定义一个集合
if (file.isDirectory()) {
FindFiles findFiles = new FindFiles(file);
list.add(findFiles);
//不是目录,是文件就执行自己的逻辑
} else {
if (file.getAbsolutePath().endsWith("dll")) {
System.out.println(file.getAbsolutePath());
}
}
}
//如果任务
if (list.size() > 0) {
Collection<FindFiles> findFiles = invokeAll(list);
for (FindFiles findFiles1 : findFiles) {
//等待所有的任务执行完成
findFiles1.join();
//所有的任务都执行完了才会执行
System.out.println(Thread.currentThread().getName() + "....join end..");
}
}
}
}
private static void testFork() {
ForkJoinPool forkJoinPool = new ForkJoinPool();
FindFiles findFiles = new FindFiles(new File("d://"));
//execute方法是异步的
forkJoinPool.execute(findFiles);
//阻塞,等待ForkJoin执行完,主线程才往下执行
findFiles.join();
System.out.println("end.....");
}
public static void main(String[] args) {
testFork();
}