实战目的:
爬取目标网页的相关数据(json格式)
实战步骤:
1、获取预览(或response)数据手动登录页面,F12进入“网络”,查看预览数据,如果是你需要的数据,则将该页面的url复制下来。
利用vscode的工具:thunder client,模拟发送,查看反馈回来的json数据
2、 编程实战
环境:
- python 3.9
- pycharm
可根据F12来判断用户是需要操作的是GET 还是 POST
requests方法如下:
requests.get(url, headers) #看起来更简单
requests.post(url,data_json,headers)
会发现get和post的请求存在一些差异:是否需要data,headers的差异