python多线程爬虫之多线程之间的通信——队列之生产与消费模式
在上上篇文章讲多线程的时候附上了一则爬取腾讯招聘的多线程爬虫,也用到了队列,刚刚我做了写改动,就再写一篇文章把代码贴出来吧:
class Tencent(Thread): #生产者线程,专门发送请求,然后将请求结果放入队列
def __init__(self,queue,t):
self.headers = {'User-Agent': 'Mozilla/...
原创
2019-08-29 19:53:07 ·
459 阅读 ·
0 评论