python requests请求失败重试_python接口自动化29-requests超时重试方法(由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败)...

前言

"由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败",这是经常遇到的问题

requests.exceptions.ConnectionError: HTTPSConnectionPool(host='www.github.com', port=443): Max retries exceeded with url: / (Caused by NewConnectionError(': Failed to establish a new connection: [WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败。',))

一般出现这个问题的原因是:host='www.github.com' 主机地址没连上,使用 requests 发请求时,有些网站服务器不稳定,特别是国外的网站,经常会出现连接失败情况。

连接失败后,有时候会抛出上面异常,有时候会一直卡住,进入假死状态,没响应,也不会结束。

timeout

requests 发请求的时候会有个默认的超时时间,这个时间在20秒左右

import requests

s = requests.session()

url = "https://www.github.com/"

r = s.request("GET", url=url)

print(r.text)

连不上服务器会出现异常:requests.exceptions.ConnectionError

requests.exceptions.ConnectionError: HTTPSConnectionPool(host='www.github.com', port=443): Max retries exceeded with url: / (Caused by NewConnectionError(': Failed to establish a new connection: [WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败。',))

如果请求一直没响应,进入假死状态,可以加个 timeout 超时时间,达到这个请求超时时间就结束,如 15 秒超时。

import requests

s = requests.session()

url = "https://www.github.com/"

r = s.request("GET", url=url, timeout=15)

print(r.text)

这样抛出的异常是:requests.exceptions.ConnectTimeout

raise ConnectTimeout(e, request=request)

requests.exceptions.ConnectTimeout: HTTPSConnectionPool(host='www.github.com', port=443): Max retries exceeded with url: / (Caused by ConnectTimeoutError(, 'Connection to www.github.com timed out. (connect timeout=15)'))

失败重试 max_retries

Requests 自带了一个传输适配器,也就是 HTTPAdapter。 这个适配器使用了强大的 urllib3,为 Requests 提供了默认的 HTTP 和 HTTPS 交互。

每当 Session 被初始化,就会有适配器附着在 Session 上,其中一个供 HTTP 使用,另一个供 HTTPS 使用。

import requests

from requests.adapters import HTTPAdapter

s = requests.session()

# max_retries=3 重试3次

s.mount('http://', HTTPAdapter(max_retries=3))

s.mount('https://', HTTPAdapter(max_retries=3))

url = "https://www.github.com/"

r = s.request("GET", url=url, timeout=15)

print(r.text)

这样每次请求超时15s,超时后会重试3次,最大请求时长45s.

  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值