python 使用gevent库即queue模块实现多协程异步爬取多个网站
第一部分先导入所需模块及库
1.切记:一定要先从gevent库中导入monkey模块并调用monkey.patch_all()方法
不然程序返回值有问题哦!
2.然后再依次导入其他所需的库及模块
记录开始时间
并用列表将要爬取的所有URL记录下来
第二部分银行开门营业取号排队
1.创建一个排队对象
queue=Queue()
2.用for循环遍历放有URL的列表,并将遍历到的url都放进队列中
queue.put_nowait(url)
第三部分 确定银行柜台人员业务
1.定义函数: 业务人员先判断还
原创
2020-12-11 16:25:25 ·
295 阅读 ·
0 评论