- 首先F12打开需要的网页,在Network下选择XHR
- 选择想要爬取的内容复制其链接
- requests.get()获取(可能需要伪装成浏览器,可以用
about:version
查看chrome浏览器的User-agent) - 上一步得到的内容json.load()转成json格式
- jsonpath.jsonpath()进行信息提取
爬取动态网页
最新推荐文章于 2024-08-23 12:39:49 发布
about:version
查看chrome浏览器的User-agent)