Python+Requests模块_设置代理、超时设置、重定向设置

设置代理

代理(英语:Proxy),也称网络代理,是一种特殊的网络服务,英文全称是(Proxy Server),其功 能就是代理网络用户去取得网络信息。形象的说:它是网络信息的中转站。代理服务器就好象一个大的 Cache,这样就能显著提高浏览速度和效率。

免费代理地址:https://proxy.mimvp.com/freesecret?proxy=in_hp&sort=&page=1

Requests模块设置代理的方式如下

import requests
# 设置代理,多用于爬虫
proxies = {"http":"http://12.34.56.79:9527",
           "https":"https://12.34.56.79:9527"}

# 1,普通的代理
res = requests.get(url="http://www.hnxmxit.com",proxies=proxies)
print(res.content.decode("utf-8"))

# 2,携带了登录的用户名和密码
# proxies1 = {"http":"http://用户名:密码@12.34.56.79:9527"}
# res = requests.get(url="http://hmxmxit.com",proxies=proxies1)
# print(res.content.decode("utf-8"))

超时设置

Requests模块可以设置接收数据的超时时间,超出设定的时间还没有数据返回,就抛出异常。超时设 置有两种类型表达:float 、tuple

timeout():以秒为单位

如果远端服务器很慢,你可以让 Request 永远等待,传入一个 None 作为 timeout 值

代码示例:

import requests,time
# 超时设置(以秒为单位)
# 1,接收数据的超时时间
print(time.time())
response = requests.get(url="http://www.hnxmxit.com",timeout=1)
print(time.time())

# 2,链接超时,接收超时
# 传入一个None 作为 timeout 值会一直等待
print(time.time())
res = requests.get(url="http://www.hnxmxit.com",timeout=(1,2))  # 以秒为单位(连接,接收)
print(time.time()) 

重定向设置

在请求url时,服务器会自动把我们的请求重定向,可以使用response.history来查看重定向。如果不想进行自 动重定向,可以用参数allow_redirects关闭

设置重定向开关:allow_redirects:True/False

代码示例:

import requests
# 设置重定向开关:allow_redirects:True/False
res = requests.get(url="http://www.360buy.com",allow_redirects=True)  # 设置重定向开关
print(res.history)  # 查看重定向历史
print(res.url)

查看执行结果:

最后感谢每一个认真阅读我文章的人,礼尚往来总是要有的,虽然不是什么很值钱的东西,如果你用得到的话可以直接拿走:

这些资料,对于【软件测试】的朋友来说应该是最全面最完整的备战仓库,这个仓库也陪伴上万个测试工程师们走过最艰难的路程,希望也能帮助到你! 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值