爬虫的一般思路: 抓取网页、分析请求 解析网页、寻找数据 储存数据、多页处理 本节课主要讲授如何通过谷歌浏览器开发者工具分析真实请求的方法。 寻找真实请求的三个步骤 分析:使用谷歌浏览器开发者工具分析网页的请求 测试:测试URL请求中每个参数的作用,找出控制翻页等功能的参数