我写了爬虫在c#和java。区别不大,原则是充分利用正则表达式。这只是一个平台的问题。后来我才知道,许多爬虫是用python编写的。因为我不熟悉python目前,我不知道为什么。百度给了以下结果:1)相对于其他静态编程语言,如java、c#、c++、python、抓取web文档的界面更简洁;与其他动态脚本语言相比,比如perl, Python shell, urllib2包提供了一个相对完整的API来访问web文档。ruby(当然也是一个不错的选择)此外,爬行网页有时需要模拟浏览器的行为,并为钝爬很多网站被屏蔽了。这就是我们需要模拟用户代理的行为来构造适当的请求,如模拟用户登录、模拟会话\/ cookie存储和设置。
python的beautifulsoap提供了一个简洁的文件处理功能,可以完成大多数文档处理非常短的代码。事实上,许多语言和工具能做上面的功能,但python可以做最快的和最干净的。生命是短暂的,你需要python。Python web爬虫必须\u2026视频:优酷网Python履带基本视频最后一句话\u201C生命是短暂的,你需要Python\u201D,我立即买了一个Python书在当当网!我有崇拜python之前,我一直想学,因为各种各样的借口。。py是非常强大的linux,语言非常简单。快速发展(只能相对于python的语言,开发效率是鲁迪)语言简洁和没有太多的技巧,所以很容易阅读。跨平台(由于python的开放源码,可以更好地反映\u201C编写一次,到处运行\u201D的解释(不需要编译,运行\/调试代码直接)比java。