学习目标:了解headers中的user-agent、cookies和referer。
上次我们了解了url,这次来了解headers中最重要的user-agent、cookies和referer。
一、user-agent
这是最简单的一个,我们之前讲过,服务器为了确认发出请求的是什么,一般会检查user-agent,所以它十分重要。
二、cookies
这个我们之前也讲过,cookies是用于传输参数的,cookie不同,结果就不同。
三、referer
这个我们之前没讲过,我们先去浏览器看一下:
当你仔细看了referer以后,会发现它就是一个url,这个网页其实就是跳转前的网站。服务器如果发现有不切实际的跳转,就会有相应的反爬措施。
注:一、二略看(也可以不看),三仔细看。