- 博客(3)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 scrapy爬虫多次启动异常
最近在scrapy爬虫项目中遇到一些问题，手动通过CrawlProcess调度爬虫,报出异常错误“Scrapy - Reactor not Restartable”,原因是在同一个进程中无法重启twisted框架中的reactor堆。解决方案： 通过另外一个进程中启动reactor,示例代码 import scrapyimport scrapy.crawler as c
2017-09-23 15:45:41
5936
1
转载 celery深入配置
celery深入配置 celery的官方文档其实相对还是写的很不错的.但是在一些深层次的使用上面却显得杂乱甚至就没有某些方面的介绍, 通过我的一个测试环境的settings.py来说明一些使用celery的技巧和解决办法amqp交换类型 其实一共有4种交换类型，还有默认类型和自定义类型. 但是对我们配置队列只会用到其中之三，我来一个个说明，英语好的话可以直接去
2017-09-08 10:37:02
1508
转载 关于lua垃圾回收器的理解
Lua使用基于被内置在Lua某些算法的垃圾收集自动内存管理。可以自动内存管理的结果，作为一个开发者：没有必要担心的对象分配内存。无需释放他们时，不再需要可将其设置为nil。Lua使用运行不时收集死的对象时，不再从Lua程序中访问垃圾收集器。所有对象，包括表，用户数据，函数，线程，字符串等受自动内存管理。 Lua使用增量标记和使用两个数字来控制其垃圾回收周期即垃圾收集
2017-09-05 11:14:34
281
VS2013OpenCV3属性配置文件(修正)
2016-04-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人