爬虫入门（6）——反爬（2）

目录

1 动态渲染

1.1 单击事件

1.2 异步加载数据

 2 Selenium爬取动态渲染页面

2.1 Selenium模块安装

2.2 Chrome浏览器驱动器下载

2.3 Chrome浏览器驱动器配置

3  Selenium小试牛刀

---

1 动态渲染

动态网页比静态网页更具交互性，能给用户提供更好的体验。动态渲染被广泛的应用在web网站中，大部分的网站都会以JS交互来提升用户体验。

1.1 单击事件

单击事件指的是用户在页面上单击某一个按钮或者页面元素的操作，这些按钮都会对应绑定一个JS方法，当我们在单击它们时，就会在我们无法感知的情况下去执行。

例如：

浏览器打开巨潮资讯的首页后，选择公告选项下的任意下拉框选项。

空白处右键选择“检查”或者按F12键，进入以下界面。

 

单击第2页后我们会发现，搜索框中的URL地址栏没有变化，但是网页内容发生了变化，而且“XHR” 条目中多了一条，如下图，说明单击时发送了一个新的请求。这说明它是一个动态页面。