本文是简易数据分析系列的第 5 篇，介绍如何使用 Web Scraper 控制链接参数进行翻页，以抓取豆瓣电影 TOP250 的全部数据。通过分析网址链接的规律，发现 `start` 参数表示电影排名的起点，以 25 为步长递增。利用 Web Scraper 的范围指定器，通过设置 `start=[0-225:25]` 实现对 250 条电影数据的抓取。文章还介绍了在 Web Scraper 中修改链接和抓取数据的具体步骤。
这是简易数据分析系列的第 5 篇文章。
原文首发于博客园：Web Scraper 翻页——控制链接批量抓取数据
上篇文章我们爬取了豆瓣电影 TOP250 前 25 个电影的数据，今天我们就要在原来的 Web Scraper 配置上做一些小改动，让爬虫把 250 条电影数据全部爬取下来。
前面我们同时说了，爬虫的本质就是找规律，当初这些程序员设计网页时，肯定会依循一些规则，当我们找到规律时，就可以预测他们的行为，达到我们的目的。
今天我们就找找豆瓣网站的规律，想办法抓取全部数据。今天的规律就从常常被人忽略的网址链接开始。
我们先看看第一页的豆瓣网址链接：
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
最低0.47元/天 解锁文章
184
