1.1并发容器类
同步类容器
同步类容器都是线程安全的,但在某些场景下可能需要加锁来保护复合操作。
复合类操作如:迭代(反复访问元素,遍历完容器中所有的元素)、跳转(根据指定的顺序找到当前元素的下一个元素)、以及条件运算。
这些复合操作在多线程并发地修改容器时,可能会表现出意外的行为,最经典的便是ConcurrentModificationException
,原因是当容器迭代的过程中,被并发的修改了内容,这是由于早期迭代器设计的时候并没有考虑并发修改的问题。
使用同步类容器的时候,如果使用增强for循环或者Iterator迭代器来遍历容器的话,会导致
ConcurrentModificationException
,因为它们循环的时候会额外创建线程来遍历,如果需要在遍历的时候并对他们进行操作就会导致该异常。如果需要,应使用传统的for循环,传统的for循环是单线程的,线程会等待进行代码操作完成以后再进行遍历。
同步类容器:如Vector、HashTable。
这些容器的同步功能其实都是有JDK的Collections.synchronized等工厂方法去创建实现的。
其底层的机制无非就是用synchronized关键字对每个公用的方法都进行同步,或者使用Object mutex对象锁的机制使得每次只能有一个线程访问容器的状态。
这种方法不能满足高并发需求。
并发类容器
jdk5.0以后提供了多种并发类容器来替代同步类容器从而改善性能。
同步类容器的状态都是串行化的。
他们虽然实现了线程安全,但是严重降低了并发性,在多线程环境时,严重降低了应用程序的吞吐量。
ConcurrentMap集合类使用与底层原理分析
ConcurrentMap
接口下有俩个重要的实现:
ConcurrentHashMap
ConcurrentSkipListMap
(支持并发排序功能)
ConcurrentHashMap
内部使用段(Segment)来表示这些不同的部分,每个段其实就是一个小的HashTable,它们有自己的锁。
只要多个修改操作发生在不同的段上,它们就可以并发进行。把一个整体分成了16个段(Segment),也就是最高支持16个线程的并发修改操作。
这也是在多线程场景时减小锁的粒度从而降低锁竞争的一种方案。并且代码中大多共享变量使用volatile关键字声明,目的是第一时间获取修改的内容,性能非常好。
CopyOnWrite集合类使用与底层原理分析
Copy-On-Write简称COW,是一种用于程序设计中的优化策略。
JDK里的COW容器有两种:
CopyOnWriteArrayList
CopyOnWriteArraySet
COW容器非常有用,可以在非常多的并发场景中使用到 。
什么是CopyOnWrite容器?
CopyOnWrite容器即 写时复制的容器。
通俗的理解是当我们往一个容器添加元素的时候,不直接往当前容器添加,而是先将当前容器进行Copy,复制出一个新的容器,然后新的容器里添加元素,添加完元素之后,再将原容器的引用指向新的容器。
这样做的好处是我们可以对CopyOnWrite容器进行 并发的读,而不需要加锁,因为当前容器不会添加任何元素。
所以CopyOnWrite容器也是一种读写分离的思想,读和写不同的容器
并发与阻塞队列Queue讲解
在并发队列上JDK提供了两套实现,
一个是以ConcurrentLinkedQueue
为代表的高性能队列,
一个是以BlockingQueue
接口为代表的阻塞队列
无论哪种都继承自Queue接口
ConcurrentLinkedQueue
- ConcurrentLinkedQueue:是一个适用于高并发场景下的队列,通过无锁的方式,实现了高并发状态下的高性能,通常ConcurrentLinkedQueue性能好于BlockingQueue。它是一个基于链接节点的无界线程安全队列。
- 该队列的元素遵循先进先出的原则,头是最先加入的,尾是最近加入的,该队列不允许null元素。
- ConcurrentLinkedQueue重要方法:
add()
和offer()
都是加入元素的方法 (在ConcurrentLinkedQueue中,这俩个方法没有任何区别)poll()
和peek()
都是取头元素节点,区别在于前者会删除元素,后者不会。
BlockingQueue
offer(anObject)
: 表示如果可能的话, 将anObject加到BlockingQueue里,即如果BlockingQueue可以容纳, 则返回true, 否则返回false.(本方法不阻塞当前执行方法的线程)offer(E o, long timeout, TimeUnit unit)
, 可以设定等待的时间,如果在指定的时间内,还不能往队列中加入BlockingQueue,则返回失败。put(anObject)
: 把anObject加到BlockingQueue里, 如果BlockQueue没有空间, 则调用此方法的线程被阻断直到BlockingQueue里面有空间再继续.poll(long timeout, TimeUnit unit)
:从BlockingQueue取出一个队首的对象,如果在指定时间内,队列一旦有数据可取,则立即返回队列中的数据。否则直到时间超时还没有数据可取,返回失败。take()
: 取走BlockingQueue里排在首位的对象,若BlockingQueue为空,阻断进入等待状态直到BlockingQueue有新的数据被加入;drainTo()
: 一次性从BlockingQueue获取所有可用的数据对象(还可以指定获取数据的个数),通过该方法,可以提升获取数据效率;不需要多次分批加锁或释放锁。
模拟阻塞队列实战
什么是阻塞队列?如何进行模拟一个阻塞队列?
- 拥有固定长度承装元素的容器
- 计数器统计容器的容量大小
- 当队列里面没有元素的时候需执行线程要等待
- 当队列元素已满的时候执行线程也需要等待
ConcurrentLinkedQueue
ConcurrentLinkedQueue
:高性能队列
是一个适用于高并发场景下的队列,通过无锁的方式,实现了高并发状态下的高性能,通常ConcurrentLinkedQueue性能好于BlockingQueue。它是一个基于链接节点的无界线程安全队列。
//1.高性能的无阻塞无界队列:
ConcurrentLinkedQueue<String> clq = new ConcurrentLinkedQueue<>();
clq.offer("a");
clq.add("b");
clq.add("c");
clq.add("d");
//从头部取出一个元素,并且从容器本身移除
System.err.println("从头部取出元素:" + clq.poll());
System.err.println("容器长度: " + clq.size());
//从头部取出一个元素,单不会从容器中移除该元素
System.err.println("从头部取出元素: " + clq.peek());
System.err.println("容器长度: " + clq.size());
// 输出结果:
// 从头部取出元素:a
// 容器长度: 3
// 从头部取出元素: b
// 容器长度: 3
ArrayBlockingQueue
ArrayBlockingQueue
: 基于数组的阻塞队列实现
在ArrayBlockingQueue内部,维护了一个定长数组,以便缓存队列中的数据对象,其内部没实现读写分离,也就意味着生产和消费不能完全并行,长度是需要定义的,可以指定先进先出或者先进后出,也叫有界队列,在很多场合非常适合使用。
//2. 基于阻塞 - 有界队列
ArrayBlockingQueue<String> abq = new ArrayBlockingQueue<>(5);
abq.put("a");
abq.add("b");
abq.add("c");
abq.add("d");
abq.add("e");
System.err.println(abq.offer("f", 2, TimeUnit.SECONDS));
ArrayBlockingQueue<String> abq2 = new ArrayBlockingQueue<>(5);
abq.drainTo(abq2, 3);
for (Iterator iterator = abq2.iterator(); iterator.hasNext();) {
String string = (String) iterator.next();
System.err.println("元素: " + string);
}
// false
// 元素: a
// 元素: b
// 元素: c
LinkedBlockingQueue
LinkedBlockingQueue
:基于链表的阻塞队列
同ArrayBlockingQueue类似,其内部也维持着 一个数据缓冲队列(该队列由一个链表构成) ,LinkedBlockingQueue之所以能够高效的处理并发数据,是因为其内部实现采用分离锁(读写分离两个锁),从而实现生产者和消费者操作的完全并行运行。他是一个 无界队列 。
//3. 基于阻塞 - 无界队列
LinkedBlockingQueue<String> lbq = new LinkedBlockingQueue<>();
SynchronousQueue
SynchronousQueue
:一种没有缓冲的队列
生产者产生的数据直接会被消费者获取并消费。
//4. 不能盛放任何元素的 阻塞队列
SynchronousQueue<String> sq = new SynchronousQueue<>();
new Thread(new Runnable() {
@Override
public void run() {
try {
System.err.println("元素内容:" + sq.take());;
} catch (InterruptedException e) {
e.printStackTrace();
}
}
}, "t1").start();
new Thread(new Runnable() {
@Override
public void run() {
sq.add("a");
}
}, "t2").start();
//元素内容:a
PriorityBlockingQueue优先级队列
PriorityBlockingQueue
:基于优先级的阻塞队列
优先级的判断通过构造函数传入的Compator对象来决定,也就是说传入队列的对象必须实现Comparable接口,在实现PriorityBlockingQueue时,内部控制线程同步的锁采用的是公平锁,他也是一个无界的队列
PriorityBlockingQueue<Node> pbq = new PriorityBlockingQueue<Node>();
Node n3 = new Node(3, "node3");
Node n4 = new Node(4, "node4");
Node n2 = new Node(2, "node2");
Node n1 = new Node(1, "node1");
//每次添加元素都进行自下而上的堆化
pbq.add(n4);
pbq.add(n3);
pbq.add(n1);
pbq.add(n2);
//弹出堆顶元素,并把堆尾元素拿到堆顶;再做自上而下的堆化
System.err.println("0 容器为: " + pbq);
System.err.println("1 获取元素: " + pbq.take().getId());
System.err.println("1 容器为: " + pbq);
System.err.println("2 获取元素: " + pbq.take().getId());
System.err.println("2 容器为: " + pbq);
System.err.println("3 获取元素: " + pbq.take().getId());
System.err.println("3 容器为: " + pbq);
System.err.println("4 获取元素: " + pbq.take().getId());
// 0 容器为: [1:node1, 2:node2, 3:node3, 4:node4]
// 1 获取元素: 1
// 1 容器为: [2:node2, 4:node4, 3:node3]
// 2 获取元素: 2
// 2 容器为: [3:node3, 4:node4]
// 3 获取元素: 3
// 3 容器为: [4:node4]
// 4 获取元素: 4
DelayQueue延迟队列应用与实战
DelayQueue
:带有延迟时间的Queue
其中的元素只有当其指定的延迟时间到了,才能够从队列中获取到该元素。 DelayQueue中的元素必须实现Delayed接口,DelayQueue是一个 没有大小限制的队列,应用场景很多,比如对缓存超时的数据进行移除、 任务超时处理、空闲连接的关闭
等等
// 网民类
// Delayed接口要实现getDelay()跟compareTo()方法
// Delayed接口继承了Comparable接口,在Comparable的接口基础上多了一个getDelay()方法
public class WangMin implements Delayed {
private String id;
private String name;
private long endTime; //上网的截止时间
private final TimeUnit timeUnit = TimeUnit.SECONDS;
public WangMin() {
}
public WangMin(String id, String name, long endTime) {
this.id = id;
this.name = name;
this.endTime = endTime;
}
public String getId() {
return id;
}
public void setId(String id) {
this.id = id;
}
public String getName() {
return name;
}
public void setName(String name) {
this.name = name;
}
// 用来判断是否到了下机时间
@Override
public long getDelay(TimeUnit unit) {
return endTime - System.currentTimeMillis();
}
@Override
public int compareTo(Delayed delayed) {
WangMin w = (WangMin)delayed;
return this.getDelay(timeUnit) - w.getDelay(timeUnit) > 0 ? 1 : -1;
}
}
// 网吧类
public class WangBa implements Runnable {
private DelayQueue<WangMin> delayQeueu = new DelayQueue<WangMin>();
public boolean start = true; //表示网吧营业
public void startMachine(String id, String name, int money) {
WangMin wm = new WangMin(id, name, System.currentTimeMillis() + money * 1000);
System.err.println("网名: " + name + ", 身份证: " + id + ", 缴费: " + money + "元, 开始上网!" );
delayQeueu.add(wm);
}
public void overMachine(WangMin wm) {
System.err.println("网名: " + wm.getName() + ", 身份证: " + wm.getId() + ", 已经到了下机时间!");
}
@Override
public void run() {
while(start) {
try {
WangMin wm = delayQeueu.take();
overMachine(wm);
} catch (InterruptedException e) {
e.printStackTrace();
}
}
}
public static void main(String[] args) {
WangBa wangb = new WangBa();
System.err.println("网吧正常营业: ");
Thread yingye = new Thread(wangb);
yingye.start();
wangb.startMachine("001", "张三", 2);
wangb.startMachine("001", "李四", 5);
wangb.startMachine("001", "王五", 10);
// 网吧正常营业:
// 网名: 张三, 身份证: 001, 缴费: 2元, 开始上网!
// 网名: 李四, 身份证: 001, 缴费: 5元, 开始上网!
// 网名: 王五, 身份证: 001, 缴费: 10元, 开始上网!
// 网名: 张三, 身份证: 001, 已经到了下机时间!
// 网名: 李四, 身份证: 001, 已经到了下机时间!
// 网名: 王五, 身份证: 001, 已经到了下机时间!
}
}