python线程池管理两个队列_并发篇-python线程池

生产者指的是生产数据的任务，消费者指的是处理数据的任务，

在并发编程中，如果生产者的处理速度很快，而消费者的处理速度很慢，那么生产者就必须等待消费者处理完，才能继续生产数据。同样，如果消费者的处理能力大于生产者，那么消费者就必须等待生产者。

生产者消费者模式是通过一个容器来解决生产者和消费者的强耦合问题，生产者和消费者彼此之间不直接通讯，而通过阻塞队列来进行通讯，所以生产者生产完数据之后不用等待消费者处理，直接扔给阻塞队列，消费者不找生产者要数据，而是直接从阻塞队列中取，阻塞队列就行当于一个缓冲区，平衡了生产者和消费者的处理能力。

阻塞队列就是用来给生产者和消费者解耦。

>>>多进程生产者与消费者模型

# JoinableQueue内部自带计数功能，每执行一次task_done，计数减一。

>>> q.task_done()

可重复利用的线程

# 触发等待机制

>>> self.daemon = True

# 实例化的时候就直接启动线程

>>> self.start()

# 无限循环，不停执行任务

>>> while True:

# 获取任务与参数

>>> func, args, kwargs = self.queue.get()

# 执行任务

>>> func(*args, **kwargs)

# 告诉 queue 这个任务处理完毕

>>> self.queue.task_done()

# 向队列中提交任务

>>> self.queue.put((func, args, kwargs))

# 等待所有提交的任务执行完毕

>>> def join(self):

# 问 queue 任务是否执行完毕

>>> self.queue.join()

>>>执行结果

任务完成后，主线程就开始退出，因此守护线程被杀死。