![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python 爬虫
kk123a
这个作者很懒,什么都没留下…
展开
-
urllib2 cookielib
1.cookielib模块cookielib模块的主要作用是提供可存储cookie的对象,以便于与urllib2模块配合使用来访问Internet资源。例如可以利用本模块的CookieJar类的对象来捕获cookie并在后续连接请求时重新发送。coiokielib模块用到的对象主要有下面几个:CookieJar、FileCookieJar、MozillaCookieJar、LWPCookieJ转载 2016-04-19 19:22:33 · 458 阅读 · 0 评论 -
celery配置使用
一. celery 简介Celery 是一个专注于实时处理和任务调度的分布式任务队列, 同时提供操作和维护分布式系统所需的工具.. 所谓任务就是消息, 消息中的有效载荷中包含要执行任务需要的全部数据.Celery 是一个分布式队列的管理工具, 可以用 Celery 提供的接口快速实现并管理一个分布式的任务队列.Celery 本身不是任务队列, 是管理分布式任务队列的工具.转载 2017-07-06 14:58:02 · 20486 阅读 · 0 评论 -
celery supdervisor redis使用实例
python celery异步任务队列(redis + supervisor)2015年11月15日 Python 评论 1 条 阅读 8,591 views 次 PDF下载:python-celery.pdf celery简介:celery是一个异步任务队列/基于分布式消息传递的作业队列。它侧重于实时操作,但对调度支持也很好。 celery是用Pytho转载 2017-07-06 14:59:30 · 930 阅读 · 0 评论