ajax分析方法
简介:
ajax全称 Asynchronous JavaScript and XML,就是异步的JavaScript和XML,不是一种编程的语言,而是利用JavaScript在保证页面不被刷新的情况下,页面链接不改变的情况下与服务器交换数据并更新网页的技术。简称:局部刷新技术
1、ajax分析方法
查看请求
我们已QQ浏览器为大家介绍,我们以今日头条来给大家介绍,https://www.toutiao.com/,在搜索栏里面搜索街拍,然后如图找到每个标题栏的地址
我们打开调试模式F12,点击NetWork,我们来分析我所要的数据藏在哪里

从过滤的请求中选中一个以?开头的请求,在Headers里Request Headers最下面是否有
x-requested-with:XMLHttpRequest,这是一个ajax请求标记,证明这个请求是ajax请求,就证明我们找对了

我们可以清楚的看到这个General的Request URL中才是爬取图片的地址,这个URL的构成除了offset在变化,其他的都是一样的,那么我们在构造URL的时候就方便很多了,用正则匹配一下就可以了。
剩下我们要爬取的图片就更加的简单了


2、获取ajax请求爬取当前链接的文字