首先,目标页面长这样
我们要爬出里面头像的url
但是想要进入这个页面需要先登录,获取cookie
所以先访问登录接口:https://github.com/session
这个参数需要的比较全,用户名,密码,token,cookie都要给
请求成功后,从返回的响应对象里获取cookie
再带上这个cookie去请求个人信息页
成功获得个人信息页之后用xpath把里面的头像url提取出来
结果
首先,目标页面长这样
我们要爬出里面头像的url
但是想要进入这个页面需要先登录,获取cookie
所以先访问登录接口:https://github.com/session
这个参数需要的比较全,用户名,密码,token,cookie都要给
请求成功后,从返回的响应对象里获取cookie
再带上这个cookie去请求个人信息页
成功获得个人信息页之后用xpath把里面的头像url提取出来
结果