LilyWang0904的博客

原创 爬虫浅析及实例操作

一、什么是爬虫呢 网络爬虫（又被称为网页支柱，网络机器人）是一种按照一定的规则，自动的抓取万维网信息的程序，可以理解为模拟客户端发送网络请求，接受请求对应的响应。 二、爬虫有哪些分类 根据使用场景，网络爬虫可分为 通用爬虫（General Purpose Web Crawler）和聚焦爬虫（Focused Web Crawler）两种。 通用爬虫是搜索引擎抓取系统的重要组成部分，主要目的是将互联网...