根据被爬取网站的数量不同,可以分为: 通用爬虫,如搜索引擎聚焦爬虫,如12306抢票,或专门抓取某一个(某一类)网站数据 根据是否以获取数据为目的,可以分为: 功能性爬虫,给你喜欢的明星投票、点赞数据增量爬虫,比如招聘信息 根据url地址和对应的页面内容是否改变,数据增量爬虫可以分为: 基于url地址变化、内容也随之变化的数据增量爬虫url地址不变、内容变化的数据增量爬虫 爬虫的分类