爬虫-ProxyHandler代理类-通过代理发起请求

小结代理的使用套路

》核心部骤

# 代理处理器对象
handler = ProxyHandler(pro_dict)
# 打开器对象
opener = build_opener(handler)
# 打开器对象的打开方法
res = opener.open(url)

ProxyHandler处理器 代理设置

》笔记

通过代理发请求的原理

通过代理来发请求

》流程如图

不错的工具网址

httpbin.org
http://httpbin.org/

查看get信息

httpbin.org/get
http://httpbin.org/get

查看请求ip

http://httpbin.org/ip

测试通过代理发的请求

通过Ip代理来发起请求，然后查看一下到底是哪一个代理在生效

练习

》直接发请求

》通过请求对象发请求

》通过代理发请求

from urllib.request import urlopen, Request, ProxyHandler, build_opener

url = 'http://httpbin.org/ip'

pro_dict = {"http": "115.221.244.217"}
handler = ProxyHandler(pro_dict)
opener = build_opener(handler)
# req = Request(url)
res = opener.open(url)
print(res.read())

结果

实测结果，并没有显示代理的ip

原晨待核实

不过如果提供的代理ip有问题

是不会请求成功的

当前有结果，代表着还是一个成功的请求