Python爬虫超时报错[WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败,实现报错重试

Python爬虫超时报错[WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败


转载!!!:转载地址

转载!!!:转载地址

转载!!!:转载地址

一、简单重试方式

在Python中,我们可以通过使用try和except语句实现错误处理和重试,以下示例代码展示了如何在出现异常情况时重试三次。

import requests
from requests.exceptions import Timeout

tries = 3
for i in range(tries):
    try:
        response = requests.get('https://example.com', timeout=10)
    except Timeout:
        if i < tries - 1:
            continue
        else:
            raise
    break

代码解释:

requests.get()方法用于发送请求,并使用timeout参数设置超时时间为10秒。
如果请求出现超时异常,在未到达重试次数限制前,将继续重试直到达到最大重试次数。
如果已达到最大重试次数,则抛出异常;否则,继续执行后续重试。

二、带有时间间隔的重试方式

在进行网络请求时,出现连续请求的情况是十分常见的。为了避免过度消耗CPU资源和网卡带宽,我们可以添加一个时间间隔,使得在两次请求之间有一段时间的缓冲,以下示例代码展示了如何在出现网络超时时进行带有时间间隔的重试:

import requests
import time

tries = 3
for i in range(tries):
    try:
        response = requests.get('https://example.com', timeout=10)
    except:
        if i < tries - 1:
            time.sleep(1) # 等待1秒后重试
            continue
        else:
            raise
    break

总结

以上示例展示了Python中重试的两种方法,其中第一种方法简单易用,适用于请求处理较为简单的情况,而第二种方法在处理连续请求时非常有用。在实际开发中,我们可以根据实际情况使用上述方法进行错误处理和重试策略制定,从而使程序更加稳定和健壮。

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值