千丈之松的专栏

转载 最基本的网页爬虫（数据采集）

经常看到一些交流网页爬虫的初学者来问有没有教程，什么是爬虫呢?(ps:不是爬虫类，记得最搞笑的是一个交流这个主题的群，有人进来发广告，广告的内容则是卖蜥蜴、变色龙之类的爬虫)。ok，言归正传，什么是网络爬虫呢？     网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁