00爬虫——关于UserAgent

预备问题:什么是UA?

User-Agent 即用户代理,简称“UA”,网站服务器通过识别 “UA”来确定用户所使用的操作系统版本、CPU 类型、浏览器版本等信息,并通过判断 UA 来给客户端发送不同的页面。
当前浏览器UA信息 :①浏览器名称 ②浏览器版本
③系统平台 ④UA信息

问题1:如何获取爬虫程序UA信息?
import urllib.request
response = urllib.request.urlopen('http://httpbin.org/get')
html = response.read().decode()
print(html)

#httpbin.org ①用于测试 HTTP 请求和响应的各种信息
#            ②cookie、IP、headers 和登录验证等
#            ③支持 GET、POST 等多种方法,

结果:

{
   
  "args": {
   }, 
  "headers": {
   
    "Accept-Encoding": "identity", 
    "Host": "httpbin.org", 
    "User-Agent": "Python-urllib/3.9", #可以判断出爬虫程序
    "X-Amzn-Trace-Id": "Root=1-6287ab2c-28122ec60a332cdc5a7219c3"
  }, 
  "origin"
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值