当我们需要运用爬虫程序爬取网站信息数据时,最先需要分析数据到底是在服务器端组成好发回给浏览器的?还是通过Ajax请求进行发送的?
验证方法:
1.点击要爬取的网页数据的下一页,观察地址栏是否发生变化。如果没有发生变化,则说明是Ajax请求。
2.在开发者模式下(F12),单击左上角小箭头,去在网页中找他的element,如果在element真实存在;在网页中单击右键,查看网页源代码,(ctrl+F)查找element中div的属性名,发现不存在,或者被注释掉了,则证明是一个Ajax请求。
下面以王者荣耀官网为例: 王者荣耀官网
从上图可以看出,我们查找的div标签属于被注释的内容,所以该网页的高清壁纸是Ajax请求。