- 博客(3)
- 收藏
- 关注
原创 简单的多线程爬虫模板
多线程爬虫模板使用明细:要爬虫的url为 txt文本,且每行只有一个url连接该模板之作简单的获取title使用,其他提取页面内容操作在 requests_url方法中自行添加转载请注明出处‘’’’’’ python# coding:utf-8import requestsimport timeimport threadingimport collectionsimport...
2019-06-20 10:38:39 356
原创 django 加 celery 异步任务配置到成功运行
这两天在看celery怎样在django上搭建,网上各种各样的教程看了不少,有的很详细,有的根本就用不上,这里说下我的配置,也是从网上东拉西找配好的,还没有弄很明白,但是可以运行,菜鸡,请勿嘲笑。 这里就不说celery运行原理什么的,网上也挺多的,个人觉得既然都找用法了,怎么运行的应该差不多清楚了,直接上配置吧。 先说下我遇到的问题吧,很容易忽略的问题:1,...
2018-08-14 15:33:20 1431
转载 Python Django并行分布式框架 Celery
Celery 官网:http://www.celeryproject.org/ Celery 官方文档英文版:http://docs.celeryproject.org/en/latest/index.htmlCelery 官方文档中文版:http://docs.jinkan.org/docs/celery/celery配置:http://docs.jinkan.org/do...
2018-07-25 14:38:28 7518
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人