为什么用python语言写爬虫

Python：语法优美、代码简洁、开发效率高、支持的模块多。相关的HTTP请求模块和HTML解析模块非常丰富。还有Scrapy和Scrapy-redis框架让我们开发爬虫变量异常简单。

PHP：它对多线程、异步支持的不是很好，并发处理能力弱。爬虫是工具性程序，对速度和效率要求比较高。
Java： 语言本身很笨重，代码量很大。重构成本比较高，任何修改会导致代码大量改动。爬虫经常要修改采集代码。
C/C++：学习和开发成本高。写个小爬虫程序可能要大半天时间。