【Java并发编程的艺术】【学习笔记】并发工具类

原创 2018年01月03日 21:59:13

4、并发工具类

4.1、CountDownLatch

​ CountDownLatch允许一个或多个线程等待其他线程完成操作

​ 假设有这样一个需求:我们需要解析一个Excel里多个sheet的数据,此时可以考虑使用多线程,每个线程解析一个sheet里的数据,等待所有的sheet都解析完之后,程序需要提示解析完成。在这个需求中,要实现主线程等待所有线程完成sheet的解析操作,最简单的做法是使用join()方法。

public class JoinCountDownLatchTest {
  public static void main(String[] args) throws InterruptedException {
    Thread parser1 = new Thread(new Runnable() {
      @Override
      public void run() {
      }
    });
    Thread parser2 = new Thread(new Runnable() {
      @Override
      public void run() {
        System.out.println("parser2 finish");
      }
    });
    parser1.start();
    parser2.start();
    parser1.join(); //主线程等parser1和parser2完成
    parser2.join();
    System.out.println("all parser finish");
  }
}
public final synchronized void join(long millis)  //Thread.join()
  throws InterruptedException {
  long base = System.currentTimeMillis();
  long now = 0;

  if (millis < 0) {
    throw new IllegalArgumentException("timeout value is negative");
  }

  if (millis == 0) {
    while (isAlive()) {
      wait(0);//wait(0)表示永远等待下去
    }
  } else {
    while (isAlive()) {
      long delay = millis - now;
      if (delay <= 0) {
        break;
      }
      wait(delay);
      now = System.currentTimeMillis() - base;
    }
  }
}

​ join用于让当前执行线程等待join线程执行结束。其实现原理是不停检查join线程是否存活,如果join线程存活则让当前线程永远等待。其中wait(0)表示永远等待下去。

​ 直到join线程中止后,线程的this.notifyAll()方法会被调用,调用notifyAll()方法是在JVM里实现的,所有在JDK里看不到,大家可以查看JVM源码。

​ 在JDK1.5之后的并发包中提供的CountDownLatch也可以实现join的功能,并且比join的功能更多。

public class CountDownLatchTest {
  staticCountDownLatch c = new CountDownLatch(2);
  public static void main(String[] args) throws InterruptedException {
    new Thread(new Runnable() {
      @Override
      public void run() {
        System.out.println(1);
        c.countDown(); //等待计数减一
        System.out.println(2);
        c.countDown(); //等待计数减一
      }
    }).start();
    c.await(); //主进程等待
    System.out.println("3");
  }
}

​ CountDownLatch的构造函数接受一个int类型的参数作为计数器,如果你想等待N个点完成,这里就传入N。

​ 当我们调用CountDownLatch的countDown方法时,N就会减1,CountDownLatch的await方法会阻塞当前线程,直到N变成零。由于countDown方法可以用在任何地方,所以这里说的N个点,可以是N个线程,也可以是1个线程里的N个执行步骤。用在多个线程中,只需要把这个CountDownLatch的引用传递到线程里即可。

​ 如果有某个解析sheet的线程处理比较慢,我们不可能让主线程一直等待,所有可以使用另外一个带指定时间的await方法——await(long time, TImeUnit unit),这个方法等待特定时间后,就会不再阻塞当前线程。join也有类似的方法。

总结

在完成一组正在其他线程中执行的操作之前,它允许一个获取多个线程一直等待。

用给定的计数初始化CountDownLatch。由于调用了countDown()方法,所以在当前计数到达零之前,await方法会一直受阻塞。之后,会释放所有等待的线程,await的所有后续调用都将立即返回。这种现象只出现一次——计数无法被重置。

内部使用共享锁来实现。CountDownLatch中静态内部类Sync继承了AbstractQueuedSynchronizer。Sync重写了tryAcquireShared和tryReleaseShared方法。

4.2、CyclicBarrier

​ CyclicBarrier的字面意思是可循环使用(Cyclic)的屏障(Barrier)。它要做的事情是,让一组线程到达一个屏障(也可以叫同步点)时被阻塞,直到最后一个线程到达屏障时,屏障才会开门,所有被屏障拦截的线程才会继续运行。

​ CyclicBarrier默认的构造方法是CyclicBarrier(int parties),其参数表示屏障拦截的线程数量,每个线程调用await方法告诉CyclicBarrier我已经到达了屏障,然后当前线程被阻塞。

public class CyclicBarrierTest {
  staticCyclicBarrier c = new CyclicBarrier(2);
  public static void main(String[] args) {
    new Thread(new Runnable() {
      @Override
      public void run() {
        try {
          c.await(); //到达屏障
        } catch (Exception e) {
        }
        System.out.println(1);
      }
    }).start();
    try {
      c.await(); //到达屏障
    } catch (Exception e) {
    }
    System.out.println(2);
  }
}

​ 因为主线程和子线程的调度是由CPU决定的,两个线程都有可能先执行,所有会产生两种输出。1 2 与 2 1 。

​ 如果把new CyclicBarrier(2)修改成new CyclicBarrier(3),则主线程和子线程会永远等待,因为没有第三个线程执行await方法,即没有第三个线程到达屏障,所有之前到达屏障的两个线程都不会继续执行。

​ CyclicBarrier还提供一个更高级的构造函数CyclicBarrier(int parties,Runnable barrier-Action),用于在线程到达屏障时,优先执行barrierAction,方便处理更加复杂的业务场景。

import java.util.concurrent.CyclicBarrier;
public class CyclicBarrierTest2 {
  static CyclicBarrier c = new CyclicBarrier(2, new A());
  public static void main(String[] args) {
    new Thread(new Runnable() {
      @Override
      public void run() {
        try {
          c.await();
        } catch (Exception e) {
        }
        System.out.println(1);
      }
    }).start();
    try {
      c.await();
    } catch (Exception e) {
    }
    System.out.println(2);
  }
  static class A implements Runnable {
    @Override
    public void run() {
      System.out.println(3); //到达屏障时输出
    }
  }
}

​ CyclicBarrier可以用于多线程计算数据,最后合并计算结果的场景。例如,用一个Excel保存了用户所有银行流水,每个Sheet保存一个帐户近一年的每笔银行流水,现在需要统计用户的日均银行流水,先用多线程处理每个sheet里的银行流水,都执行完之后,得到每个sheet的日均银行流水,最后再用barrierAction用这些线程的计算结果,计算出整个Excel的日均银行流水。

/**
* 银行流水处理服务类
*
* @authorftf
*
*/
publicclass BankWaterService implements Runnable {
  /**
* 创建4个屏障,处理完之后执行当前类的run方法
*/
  private CyclicBarrier c = new CyclicBarrier(4, this);
  /**
* 假设只有4个sheet,所以只启动4个线程
*/
  private Executor executor = Executors.newFixedThreadPool(4);
  /**
* 保存每个sheet计算出的银流结果
*/
  private ConcurrentHashMap<String, Integer>sheetBankWaterCount = new
    ConcurrentHashMap<String, Integer>();
  privatevoid count() {
    for (inti = 0; i< 4; i++) {
      executor.execute(new Runnable() {
        @Override
        publicvoid run() {
          // 计算当前sheet的银流数据,计算代码省略
          sheetBankWaterCount
            .put(Thread.currentThread().getName(), 1);
          // 银流计算完成,插入一个屏障
          try {
            c.await();
          } catch (InterruptedException |
                   BrokenBarrierException e) {
            e.printStackTrace();
          }
        }
      });
    }
  }
  @Override
  publicvoid run() {
    intresult = 0;
    // 汇总每个sheet计算出的结果
    for (Entry<String, Integer>sheet : sheetBankWaterCount.entrySet()) {
      result += sheet.getValue();
    }
    // 将结果输出
    sheetBankWaterCount.put("result", result);
    System.out.println(result);
  }
  publicstaticvoid main(String[] args) {
    BankWaterService bankWaterCount = new BankWaterService();
    bankWaterCount.count();
  }
}

CyclicBarrier和CountDownLatch的区别

差异 CountDownLatch CyclicBarrier
计数器 只能使用一次 使用reset()方法重置(如果计算 错误,可以重置,重新执行)
提供其他方法 getnumberWaiting方法可以获取CyclicBarrier阻塞的线程数量;isBroken方法用来了解阻塞的线程是否被中断
允许1或N个线程等待其他线程 允许N个线程相互等待
public class CyclicBarrierTest3 {
  staticCyclicBarrier c = new CyclicBarrier(2);
  public static void main(String[] args) throws InterruptedException,
    BrokenBarrierException {
    Thread thread = new Thread(new Runnable() {
      @Override
      public void run() {
        try {
          c.await();
        } catch (Exception e) {
        }
      }
    });
    thread.start();
    thread.interrupt();
    try {
      c.await();
    } catch (Exception e) {
      System.out.println(c.isBroken()); //输出true
    }
  }
}

总结

它允许一组线程互相等待,直到到达某个 公共屏障点。

通俗讲:让一组线程到达一个屏障时被阻塞,直到最后一个线程到达屏障时,屏障才会开门,所有被屏障拦截的线程才会继续干活。

底层采用ReentrantLock + Condition实现。

应用场景:多线程结果合并的操作,用于多线程计算数据,最后合并计算结果。

4.3、Semaphore

​ Semaphore(信号量)是用来控制同时访问特定资源的线程数量,它通过协调各个线程,以保证合理地使用公共资源。

​ Semaphore可以用于做流量控制,特别是公用资源有限的应用场景,比如数据库连接。假如有一个需求,要读取几万个文件的数据,因为都是IO密集型任务,我们可以启动几十个线程并发地读取,但是如果读到内存后,还需要存储到数据库中,而数据库的连接数只有10个,这时,我们必须控制只有10个线程同时获取数据库连接保存数据,否则会报错无法获取数据库连接。

public class SemaphoreTest {
  private static final int THREAD_COUNT = 30;
  private static ExecutorServicethreadPool = Executors
    .newFixedThreadPool(THREAD_COUNT);
  private static Semaphore s = new Semaphore(10);//申请10个并发许可
  public static void main(String[] args) {
    for (inti = 0; i< THREAD_COUNT; i++) {
      threadPool.execute(new Runnable() {
        @Override
        public void run() {
          try {
            s.acquire();//获取一个许可
            System.out.println("save data");
            s.release();//归还许可
          } catch (InterruptedException e) {
          }
        }
      });
    }
    threadPool.shutdown();
  }
}

Semaphore其他方法

方法名 描述
int availablePermits() 返回此信号量中当前可用的许可证数。
int getQueueLength() 返回正在等待获取许可证的线程数。
boolean hasQueuedThreads() 是否有线程正在等待获取许可证
void reducePermits(int reduction) 减少reduction个许可证,是个protected方法。
Collection getQueuedThreads() 返回所有等待获取许可证的线程集合,是个protected方

4.4、Exchanger

​ Exchanger(交换者)是一个用于线程间协作的工具类。用于进行线程间的数据交换。它提供一个同步点,在这个同步点,两个线程可以交换彼此的数据。这两个线程通过exchange方法交换数据,如果第一个线程先执行exchange()方法,它会一直等待第二个线程也执行exchange方法,当两个线程都能达到同步点时,这两个线程就可以交换数据,将本线程生产出来的数据传递给对方。

Exchanger可以用于遗传算法,遗传算法里需要选出两个人作为交配对象,这时候会交换两人的数据,并使用交叉规则得出2个交配结果。

Exchanger也可以用于校对工作,比如我们需要将纸质银行流水通过人工的方式录入成电子银行流水,为了避免错误,采用AB岗两人进行录入,录入到Excel之后,系统需要加载这两个Excel,并对两个Excel数据进行校对,看看是否录入一致。

public class ExchangerTest {
  private static final Exchanger<String>exgr = new Exchanger<String>();
  private static ExecutorServicethreadPool = Executors.newFixedThreadPool(2);
  public static void main(String[] args) {
    threadPool.execute(new Runnable() {
      @Override
      public void run() {
        try {
          String A = "银行流水A";    // A录入银行流水数据
          exgr.exchange(A);
        } catch (InterruptedException e) {
        }
      }
    });
    threadPool.execute(new Runnable() {
      @Override
      public void run() {
        try {
          String B = "银行流水B";    // B录入银行流水数据
          String A = exgr.exchange("B");
          System.out.println("A和B数据是否一致:" + A.equals(B) + ",A录入的是:"
                             + A + ",B录入是:" + B);
        } catch (InterruptedException e) {
        }
      }
    });
    threadPool.shutdown();
  }
}

​ 如果两个线程有一个没有执行exchange()方法,则会一直等待,如果担心有特殊情况发生,避免一直等待,可以使用exchange(V x,longtimeout,TimeUnit unit)设置最大等待时长。

【Java并发编程的艺术】【学习笔记】并发工具类

4、并发工具类4.1、CountDownLatch​ CountDownLatch允许一个或多个线程等待其他线程完成操作。​ 假设有这样一个需求:我们需要解析一个Excel里多个sheet的数...
  • wengcheng_k
  • wengcheng_k
  • 2018-01-03 21:59:13
  • 418

Java并发编程艺术 8 Java中的并发工具类

第8章 Java中的并发工具类 并发工具类中主要提供了一些并发流程控制的手段。主要有CountDownLatch、CyclicBarriery和Semaphore Exchanger工具类...
  • mdq11111
  • mdq11111
  • 2017-09-03 15:20:01
  • 82

《java并发编程的艺术》读书笔记

并发编程
  • LQL_King
  • LQL_King
  • 2017-08-13 17:05:35
  • 458

【Java并发编程的艺术】【学习笔记】锁

3、锁​ 锁是用来控制多个线程访问共享资源的方式,一般来说,一个锁能够防止多个线程同时访问共享资源(但是有些锁可以允许多个线程并发的访问共享资源,比如读写锁)。​ Java5之前,Java程序...
  • wengcheng_k
  • wengcheng_k
  • 2018-01-02 20:42:36
  • 94

并发编程-concurrent.util工具类中的使用

概念:     该工具包下的类是用于在多任务下并发工具类。     1、CountDownLatch        该类类似于wait,notify的作用。       应用场景:在多线程并发中,一个...
  • zhangbin666
  • zhangbin666
  • 2017-03-18 07:21:06
  • 105

《Java并发编程的艺术》读书笔记—— 并发工具

并发工具 1.CountDownLatch           在线程协同时,经常会使用线程的join方法,join方法是阻塞当前线程等待join的线程执行完,在join方法内部是在while循环...
  • qq_31728311
  • qq_31728311
  • 2018-01-21 14:12:12
  • 40

《Java并发编程的艺术》pdf下载 高清完整版

  • 2016年06月09日 20:29
  • 12.11MB
  • 下载

《java并发编程的艺术》读书笔记-第四章java并发的基础

一概述  本文属于《java并发编程的艺术》读书笔记系列,第四章java并发的基础。 4.1线程简介 这里作者介绍了线程的相关知识,如线程、优先级,状态,daemon线程,线程的启动和停止。这里可以...
  • bohu83
  • bohu83
  • 2016-06-21 14:32:49
  • 622

《Java并发编程的艺术》第八章——Java中的并发工具

在JDK的并发包里提供了几个非常有用的工具类。CountDownLatch、CyclicBarrier和Semaphore工具类提供了一种并发流程控制的手段,Exchanger工具类提供了在线程间交换...
  • qq_24982291
  • qq_24982291
  • 2018-01-23 15:04:50
  • 20

Java Utils工具类大全

源码和jar见:https://github.com/evil0ps/utils #Java Utils --- 封装了一些常用Java操作方法,便于重复开发利用. 另外希望身为Java牛牛的你们一...
  • rj597306518
  • rj597306518
  • 2017-05-09 16:38:22
  • 10692
收藏助手
不良信息举报
您举报文章:【Java并发编程的艺术】【学习笔记】并发工具类
举报原因:
原因补充:

(最多只允许输入30个字)