Python爬虫【五】动态网页爬虫1-API
1、Network面板
Network
记录的是从打开浏览器的开发者工具到网页加载完毕之间的所有请求。
Network面板常用功能:
(1)清空按钮Clear:用于清空请求列表。
(2)保留记录Preserve Log:勾选后会保留请求记录,常用于发生页面跳转时保留前一个页面的所有请求记录。
(3)请求类型过滤器:ALL表示查看全部,点击其他的只会展示对应类型的请求。爬虫中常用的有ALL、XHR、Img、Media。
名称 | 含义 |
---|---|
All | 全部类型 |
XHR | XMLHttpRequest类型 |
JS | JavaScript类型 |
CSS | CSS类型 |
Img | 图片类型 |
Media | 音视频类型 |
Doc | 文档类型 |
(4)常用信息:展示了一些常用的请求信息,比如请求的名称、状态码、类型、数据大小和耗时等。
名称 | 含义 |
---|---|
name | 请求名称 |