爬虫: 浏览器的 User-Agent 信息

User-Agent:简称UA,它是一个特殊的字符串头,可以使服务器识别客户使用的操作系统及版本、浏览器及版本等信息。在做爬虫时加上此信息,可以伪装为浏览器;如果不加,很可能会被识别出为爬虫。

确定自己浏览器的User-Agent信息:
步骤如下:

  1. 首先打开你的浏览器(本人使用的是google浏览器百度搜索引擎)输入:about:version
    在这里插入图片描述
  2. 输入后,浏览器会跳出图中的界面,蓝色标出的“用户代理”一行就是浏览器的User-Agent
    在这里插入图片描述
  3. 当python要浏览网页时,按图中headers的方法,即可获得浏览器的权限。
    在这里插入图片描述
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值