请求方法 协议版本
host:域名
Connection(连接类型):keep-alive(长连接不要经常断开)有的网站会检查因为大部分浏览器带这个
Upgrade-Insecure-Requests:1(升级为HTTPS请求)
比如你访问百度用http 百度支持https就帮你去访问HTTPs (network 307重定向里面有)
User-Agent用户代理
1.Mozilla/5.0几乎市面上所有浏览器都支持这个协议
2.Macintosh; 指Mac 机器名字 系统版本
3.AppleWebKit/版本(来自哪) 苹果改的浏览器内核
4.浏览器版本
Referer(显示你从哪个页面过来的)可能被检查 防盗链
把图片url复制 结果却不能跳转
Cookie 保持会话 权限 登录
Authorization 认证账号密码
Host:www.baidu.com
Connection:keep-alive
User-Agent:Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.83 Safari/537.36
作用:把自己模拟成浏览器。(可恶学爬虫的就不能是小绵羊了吗?什么叫披着羊皮的大灰狼)