知乎爬虫(scrapy默认配置下单机1小时可爬取60多万条数据)
知乎爬虫(scrapy默认配置下单机1小时可爬取60多万条数据)版本:1.0 作者: AlexTan 代码请移步GitHub:ZhihuSpider前言:在这里特别鸣谢: 九茶 http://blog.csdn.net/bone_ace 学了爬虫差不多快一年了,然而由于项目原因,这还是第一次发爬虫的博客,在学习的过程中,受益最大的就是看了九茶的微博爬虫吧,所以在这里特别鸣谢。 他的代码里涉及
原创
2017-08-10 16:20:22 ·
13268 阅读 ·
28 评论