8、阻塞队列
阻塞队列(BlockingQueue)是一个支持两个附加操作的队列。这两个附加操作支持阻塞的插入和移除方法。
1)支持阻塞的插入方法:意思是当队列满时,队列会阻塞插入元素的线程,直到队列不满。
2)支持阻塞的移除方法:意思是在队列为空时,获取元素的线程会等待队列变为非空。
阻塞队列常用于生产者和消费者的场景。
插入和移除操作的4中处理方式
方法/处理方法 | 抛出异常 | 返回特殊值 | 一直阻塞 | 超时退出 |
---|---|---|---|---|
插入方法 | add(e) | offer(e) | put(e) | offer(e, time, unit) |
移除方法 | remove(e) | poll() | take() | poll(time, unit) |
检查方法 | element() | peek() | 不可用 | 不可用 |
8.1、ArrayBlockingQueue
一个由数组结构组成的有限阻塞队列。此队列按照FIFO的原则对元素进行排序。
ArrayBlockingQueue有界且固定,在构造函数时确认大小,然后不支持改变。
在多线程环境下不保证“公平性”。所谓的公平访问队列,即先阻塞线程先访问队列。非公平性是当队列可用时,阻塞的线程都可以争夺队列的访问资格。
为了保证公平性,通常会降低吞吐量。创建公平的阻塞队列
ArrayBlockingQueue fairQueue = new ArrayBlockingQueue(1000,true);
访问的公平性是使用重入锁实现的。
public ArrayBlockingQueue(int capacity, boolean fair) {
if (capacity <= 0)
throw new IllegalArgumentException();
this.items = new Object[capacity];
lock = new ReentrantLock(fair);
notEmpty = lock.newCondition();
notFull = lock.newCondition();
}
8.2、LinkedBlockingQueue
一个由链表结构组成的有界阻塞队列。此队列的默认和最大长度为Integer.MAX_VALUE。此队列按照先FIFO原则对元素进行排序。
8.3、PriorityBlockingQueue
一个支持优先级排序的无界阻塞队列。默认情况下元素采取自然顺序升序排列。
也可以自定义类实现compareTo()方法来指定元素排序规则,或者初始化PriorityBlockingQueue时,指定构造参数Comparartor来对元素进行排序。
需要注意的是不能保证同优先级元素的排序。
PriorityBlockingQueue低层采用二叉堆和重入锁来实现的。
二叉堆:
二叉树是一种特殊的堆,结果性而言就是完全二叉树或者是近似完全二叉树。
最大堆:父节点的键值总是大于或等于任何一个子节点的键值。
最小堆:父节点的键值总是小于或等于任何一个子节点的键值。
二叉堆一般用数组表示,那么其左孩子节点为:2 * n + 1,其右孩子节点为2 * (n+1),其父节点为(n-1)/2。
因为是二叉堆,所以添加操作就是不断“上冒”,而删除操作则是不断“下掉”。
8.4、DelayQueue
一个支持延时获取元素的无界阻塞队列。队列使用PriorityQueue来实现。队列中的元素必须实现Delayed接口,在创建元素时可以指定多久才能从队列中获取当前元素。只有在延迟期满时才能从队列中提取元素。
DelayQueue应用场景:
缓存系统的设计:可以用DelayQueue保持缓存元素的有效期,使用一个线程循环查询DelayQueue,一旦能从DelayQueue中获取元素时,表示缓存有效期到了。
定时任务调度:使用DelayQueue保存当天将会执行的任何和执行时间,一旦从DelayQueue中获取到任务就开始执行。
(1)如何实现Delayed接口:
DelayQueue队列的元素必须实现Delayed接口。可以参考ScheduledThreadPoolExecutor里ScheduledFutureTask类的实现。
第一步:在对象创建的时候,初始化基本数据。使用time记录当前对象延迟到什么时候可以使用,使用sequenceNumber来标识元素在队列中的先后顺序。
private static final AtomicLong sequencer = new AtomicLong(0); ScheduledFutureTask(Runnable r, V result, long ns, long period) { super(r, result); this.time = ns; this.period = period; this.sequenceNumber = sequencer.getAndIncrement(); }
第二步:实现getDelay方法,该方法返回当前元素还需要延时多长时间,单位是纳秒
public long getDelay(TimeUnit unit) { return unit.convert(time - now(), NANOSECONDS); }
第三步:实现compareTo方法来指定元素的顺序。
public int compareTo(Delayed other) { if (other == this) // compare zero if same object return 0; if (other instanceof ScheduledFutureTask) { ScheduledFutureTask<?> x = (ScheduledFutureTask<?>)other; long diff = time - x.time; if (diff < 0) return -1; else if (diff > 0) return 1; else if (sequenceNumber < x.sequenceNumber) return -1; else return 1; } long diff = getDelay(NANOSECONDS) - other.getDelay(NANOSECONDS); return (diff < 0) ? -1 : (diff > 0) ? 1 : 0; }
(2)如何实现延时阻塞队列
当消费者从队列里获取元素时,如果元素没有达到延时时间,就阻塞当前线程。
long delay = first.getDelay(TimeUnit.NANOSECONDS);
if (delay <= 0)
return q.poll();
else if (leader != null)
available.await();
else {
Thread thisThread = Thread.currentThread();
leader = thisThread;
try {
available.awaitNanos(delay);
} finally {
if (leader == thisThread)
leader = null;
}
}
代码中变量leader是一个等待获取队列头部元素的线程。如果leader不等于空,表示已经有线程在等待获取队列的头元素。所以,使用await()方法让当前线程等待信号。如果leader等于空,则把当前线程设置成leader,并使用awaitNanos()方法让当前线程等待接收信号或等待delay时间。
8.5、SynchronousQueue
一个不存储元素的阻塞队列。每一个put操作必须等待一个take操作,否则不能继续添加元素。
它支持公平访问队列。默认情况下线程采用非公平性策略访问队列。
public SynchronousQueue(boolean fair) {
transferer = fair ? new TransferQueue<E>() : new TransferStack<E>();
}
SynchronousQueue可以看成是一个传球手,负责把生产者线程处理的数据直接传递给消费者线程。队列本身并不存储任何元素,非常适合传递性场景。SynchronousQueue的吞吐量高于LinkedBlockingQueue和ArrayBlockingQueue。
8.6、LinkedTransferQueue
一个由链表结构组成的无界阻塞TransferQueue队列。相当于其他阻塞队列,LinkedTransferQueue多了tryTransfer和transfer方法。
(1) transfer方法
如果当前有消费者正在等待接受元素(消费者使用take()方法或带时间限制的poll()方法时),transfer方法可以把生产者传入的元素立刻transfer(传输)给消费者。如果没有消费者在等待接收元素,transfer方法会将元素存放在队列的tail节点,并等到该元素被消费者消费了才返回。
transfer方法的关键代码:
Node pred = tryAppend(s, haveData);
return awaitMatch(s, pred, e, (how == TIMED), nanos);
第一行代码是试图把存放当前元素的s节点作为tail节点。第二行代码是让CPU自旋等待消费者消费元素。因为自旋会消耗CPU,所以自旋一定的次数后使用Thread.yield()方法来暂停当前正在执行的线程,并执行其他线程。
(2) tryTransfer方法
tryTransfer方法是用来试探生产者传入的元素是否能直接传给消费者。如果没有消费者等待接收元素,则返回false。和transfer方法的区别是tryTransfer方法无论消费者是否接收,方法立即返回,而transfer方法是必须等待消费者消费了才返回。
对于带有时间限制的tryTransfer(E e, long timeout, TimeUnit unit)方法,试图把生产者传入的元素直接传给消费者,但是如果没有消费者消费该元素则等待指定的时间在返回,如果超时还没消费元素,则返回false,如果在超时时间内消费了元素,则返回true。
相当于ConcurrentLinkedQueue、SynchronousQueue(公平模式下)、无界的LinkedBlockingDeque等的超集。
8.7、LinkedBlockingDeque
一个由链表结构组成的双向阻塞队列。所谓双向队列指的是可以从队列两端插入和移出元素。
在初始化LinkedBlockingDeque时可以设置容量防止其过度碰撞。
另外,双向阻塞队列可以运用在“工作窃取”模式中。