在爬虫的过程中经常会遇到需要登入之后才能完整访问的情况。
使用Cookic可以模拟登入的情况,登入信息存储于Cookie中。
查找Cookie
- 通过浏览器开发者模式(F12)直接查找。
具体操作:
进入开发者模式(F12)-> Network -> 选择花费时间最长的(一般就是第一行)
红色部分即为Cookie
- 使用
session
或selenium
获取Cookie
使用Cookie,模拟登入
使用requests
库访问之前,在发送的头信息里面设置 Cookie 即可。
在爬虫的过程中经常会遇到需要登入之后才能完整访问的情况。
使用Cookic可以模拟登入的情况,登入信息存储于Cookie中。
session
或selenium
获取Cookie使用requests
库访问之前,在发送的头信息里面设置 Cookie 即可。