原文见:http://www.cnblogs.com/itogo/p/5635629.html#3740882
这里我做了稍加的改动
Queue是python标准库中的线程安全的队列(FIFO)实现,提供了一个适用于多线程编程的先进先出的数据结构,即队列,用来在生产者和消费者线程之间的信息传递。
FIFO队列
class Queue.Queue(maxsize=0)
FIFO即First in First Out,先进先出。Queue提供了一个基本的FIFO容器,使用方法很简单,maxsize是个整数,指明了队列中能存放的数据个数的上限。一旦达到上限,插入会导致阻塞,直到队列中的数据被消费掉。如果maxsize小于或者等于0,队列大小没有限制。
例子:
import queue
Q= queue.Queue()
for i in range(5):
Q.put(i)
while not Q.empty():
print(Q.get())
输出:
0
1
2
3
4
LIFO队列
class Queue.LifoQueue(maxsize=0)
LIFO即Last in First Out,后进先出。与栈的类似,使用也很简单,maxsize用法同上。
import queue
Q= queue.LifoQueue() #仅将queue.Queue()替换为queue.LifoQueue()
for i in range(5):
Q.put(i)
while not Q.empty():
print(Q.get())
输出:
4
3
2
1
0
优先级队列
class Queue.PriorityQueue(maxsize=0)
构造一个优先队列。maxsize用法同上。
import queue
import threading
class Job(object):
def __init__(self,des):
self.des = des
print('New Job:',des)
return
q= queue.PriorityQueue()
q.put((3,Job('优先级为3'))) #put的参数需要为元组,不然一直报错,不知道为啥
q.put((1,Job('优先级为1')))
q.put((8,Job('优先级为8')))
def process_job(q):
while True:
next_job = q.get()
print('Job',next_job[1].des)
q.task_done() #手动调用,告诉队列当前任务已经完成
workers = [
threading.Thread(target=process_job,args=(q,)),
threading.Thread(target=process_job,args=(q,))
]
for work in workers:
work.setDaemon(True)
work.start()
q.join()
结果为:
New Job: 优先级为3
New Job: 优先级为1
New Job: 优先级为8
Job 优先级为1
Job 优先级为3
Job 优先级为8
一些常用方法
task_done()
意味着之前入队的一个任务已经完成。由队列的消费者线程调用。每一个get()调用得到一个任务,接下来的task_done()调用告诉队列该任务已经处理完毕。
如果当前一个join()正在阻塞,它将在队列中的所有任务都处理完时恢复执行(即每一个由put()调用入队的任务都有一个对应的task_done()调用)。
join()
阻塞调用线程,直到队列中的所有任务被处理掉。
只要有数据被加入队列,未完成的任务数就会增加。当消费者线程调用task_done()(意味着有消费者取得任务并完成任务),未完成的任务数就会减少。当未完成的任务数降到0,join()解除阻塞。
put(item[, block[, timeout]])
将item放入队列中。
- 如果可选的参数block为True且timeout为空对象(默认的情况,阻塞调用,无超时)。
- 如果timeout是个正整数,阻塞调用进程最多timeout秒,如果一直无空空间可用,抛出Full异常(带超时的阻塞调用)。
- 如果block为False,如果有空闲空间可用将数据放入队列,否则立即抛出Full异常
其非阻塞版本为put_nowait
等同于put(item, False)
get([block[, timeout]])
从队列中移除并返回一个数据。block跟timeout参数同put
方法
其非阻塞方法为`get_nowait()`相当与get(False)
empty()
如果队列为空,返回True,反之返回False