伪装浏览器

#浏览器的伪装头部 不伪装的一般出现403报错

#人先拿到包裹,然后再去拿地址条去指定地址(东西拿齐直接去)
import urllib.request
dizhi = ‘https://www.csdn.net/’
head = (“User-Agent”,‘Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3314.0 Safari/537.36 SE 2.X MetaSr 1.0’
)
duixiang = urllib.request.build_opener() #创建自定义访问者,我个人理解是创建一个对象出来(创造一个访问者框架或者人)
duixiang.addheaders=[head] #把头部信息添加到刚创建的对象(人)里面
aa = duixiang.open(dizhi).read() #这个人或者对象去指定的页面
print(aa)


#使用全局变量表头信息访问页面
import re
import urllib.request
import gzip
url = ‘https://www.csdn.net/’
head = (‘User-Agent’, ‘Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3314.0 Safari/537.36 SE 2.X MetaSr 1.0’)
fang_wen = urllib.request.build_opener()
fang_wen.addheaders=[head]
#安装成全局
urllib.request.install_opener(fang_wen) #这里是我这样理解的,就是把刚刚创建的头部信息安装在其他的访问请求上,这样达到全局要求
date = urllib.request.urlopen(url).read().decode(“utf-8”, “ignore”)
print(date)

#已经拿到地址条以及包裹,等待请求再去(别人说去才去)
import urllib.request
dizhi = ‘http://www.baidu.com/’
head = {‘User-Agent’:‘Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:71.0) Gecko/20100101 Firefox/72.0’}
duixiang= urllib.request.Request(url=dizhi,headers=head)
#构建请求对象,我这里理解成是把地址和头部信息封装成一个包裹
xiangying = urllib.request.urlopen(duixiang)
#发送刚刚请求对象(上面一部的包裹)
print(xiangying.read().decode())

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值