2024年Python最新Python的重试装饰器,手把手教你实现它_python 重试装饰器,分享面试经验的软件叫什么

如果你也是看准了Python,想自学Python,在这里为大家准备了丰厚的免费学习大礼包,带大家一起学习,给大家剖析Python兼职、就业行情前景的这些事儿。

一、Python所有方向的学习路线

Python所有方向路线就是把Python常用的技术点做整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。

二、学习软件

工欲善其必先利其器。学习Python常用的开发软件都在这里了,给大家节省了很多时间。

三、全套PDF电子书

书籍的好处就在于权威和体系健全,刚开始学习的时候你可以只看视频或者听某个人讲课,但等你学完之后,你觉得你掌握了,这时候建议还是得去看一下书籍,看权威技术书籍也是每个程序员必经之路。

四、入门学习视频

我们在看视频学习的时候,不能光动眼动脑不动手,比较科学的学习方法是在理解之后运用它们,这时候练手项目就很适合了。

四、实战案例

光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。

五、面试资料

我们学习Python必然是为了找到高薪的工作,下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料,并且有阿里大佬给出了权威的解答,刷完这一套面试资料相信大家都能找到满意的工作。

成为一个Python程序员专家或许需要花费数年时间,但是打下坚实的基础只要几周就可以,如果你按照我提供的学习路线以及资料有意识地去实践,你就有很大可能成功!
最后祝你好运!!!

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友,可以戳这里获取

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

        start_time = time.time()
        for retry_count in range(max_retry_count):
            print(f"execute count {retry_count + 1}")
            use_time = time.time() - start_time
            if max_timeout and use_time > max_timeout:
                # 超出最大超时时间
                print(f"execute timeout, use time {use_time}s, max timeout {max_timeout}")
                return

            try:
                return task_func(*args, **kwargs)
            except Exception as e:
                print(f"fail {str(e)}")
                time.sleep(time_interval)

    return wrapper

return _task_retry

复制代码


看看效果



超时

@task_retry(max_retry_count=3, time_interval=1, max_timeout=2)
def user_place_order():
a = 1 / 0
print(“user place order success”)
return {“code”: 0, “msg”: “ok”}

out
execute count 1
fail division by zero
execute count 2
fail division by zero
execute count 3
execute timeout, use time 2.010528802871704s, max timeout 2
user place order ret None

超过最大重试次数

@task_retry(max_retry_count=3, time_interval=1)
def user_place_order():
a = 1 / 0
print(“user place order success”)
return {“code”: 0, “msg”: “ok”}

out
execute count 1
fail division by zero
execute count 2
fail division by zero
execute count 3
fail division by zero
user place order ret None

正常

@task_retry(max_retry_count=3, time_interval=1, max_timeout=2)
def user_place_order():
# a = 1 / 0
print(“user place order success”)
return {“code”: 0, “msg”: “ok”}

out
execute count 1
user place order success
user place order ret {‘code’: 0, ‘msg’: ‘ok’}
复制代码


#### 重试装饰器-加强版


到这重试装饰器基本功能就实现了,但还可以加强,Python现在支持 async 异步方式写法,因此要是可以兼容异步写法那就更好了。先看看装饰异步函数会是什么样的效果



import time
import asyncio
import functools

def task_retry(max_retry_count: int = 5, time_interval: int = 2, max_timeout: int = None):
“”"
任务重试装饰器
Args:
max_retry_count: 最大重试次数 默认 5 次
time_interval: 每次重试间隔 默认 2s
max_timeout: 最大超时时间,单位s 默认为 None,
“”"

def _task_retry(task_func):

    @wraps(task_func)
    def wrapper(*args, **kwargs):
        # 函数循环重试
        start_time = time.time()
        for retry_count in range(max_retry_count):
            print(f"execute count {retry_count + 1}")
            use_time = time.time() - start_time
            if max_timeout and use_time > max_timeout:
                # 超出最大超时时间
                print(f"execute timeout, use time {use_time}s, max timeout {max_timeout}")
                return

            try:
                return task_func(*args, **kwargs)
            except Exception as e:
                print(f"fail {str(e)}")
                time.sleep(time_interval)

    return wrapper

return _task_retry

@task_retry(max_retry_count=3, time_interval=1, max_timeout=2)
def user_place_order():
# a = 1 / 0
print(“user place order success”)
return {“code”: 0, “msg”: “ok”}

@task_retry(max_retry_count=3, time_interval=2, max_timeout=5)
async def user_place_order_async():
“”“异步函数重试案例”“”
a = 1 / 0
print(“user place order success”)
return {“code”: 0, “msg”: “ok”}

async def main():

# 同步案例
# ret = user_place_order()
# print(f"user place order ret {ret}")

# 异步案例
ret = await user_place_order_async()
print(f"user place order ret {ret}")

if name == ‘main’:
asyncio.run(main())

正常时候

execute count 1
user place order success
user place order ret {‘code’: 0, ‘msg’: ‘ok’}

异常时候

out
execute count 1
Traceback (most recent call last):
File “G:/code/python/py-tools/decorator/base.py”, line 138, in
asyncio.run(main())
File “G:\softs\DevEnv\python-3.7.9\lib\asyncio\runners.py”, line 43, in run
return loop.run_until_complete(main)
File “G:\softs\DevEnv\python-3.7.9\lib\asyncio\base_events.py”, line 587, in run_until_complete
return future.result()
File “G:/code/python/py-tools/decorator/base.py”, line 133, in main
ret = await user_place_order_async()
File “G:/code/python/py-tools/decorator/base.py”, line 121, in user_place_order_async
a = 1 / 0
ZeroDivisionError: division by zero

Process finished with exit code 1
复制代码


发现发生异常的时候并没有重试,为什么呢?其实在执行 **task\_func()** 它并没有真正的执行内部逻辑,而是返回一个 **coroutine** 协程对象,并不会报异常,所以再装饰器中执行一遍就成功就出来了,外面 **ret = await user\_place\_order\_async(),** 后才真正的等待执行,然后执行函数内的逻辑再报异常就没有捕获到。我们可以打断点验证下


![](https://img-blog.csdnimg.cn/img_convert/0c69006c29dc910fa6870a8059e832ae.webp?x-oss-process=image/format,png)


这样装饰器就不支持异步函数的重试,需要加强它,可以使用 **asyncio.iscoroutinefunction() 来进行异步函数的判断,** 然后再加一个异步函数的闭包就可以实现异步、同步函数都兼容的重试装饰器。



def task_retry(max_retry_count: int = 5, time_interval: int = 2, max_timeout: int = None):
“”"
任务重试装饰器
Args:
max_retry_count: 最大重试次数 默认 5 次
time_interval: 每次重试间隔 默认 2s
max_timeout: 最大超时时间,单位s 默认为 None,
“”"

def _task_retry(task_func):

    @functools.wraps(task_func)
    def sync_wrapper(*args, **kwargs):
        # 同步循环重试
        start_time = time.time()
        for retry_count in range(max_retry_count):
            print(f"execute count {retry_count + 1}")
            use_time = time.time() - start_time
            if max_timeout and use_time > max_timeout:
                # 超出最大超时时间
                print(f"execute timeout, use time {use_time}s, max timeout {max_timeout}")
                return

            try:
                task_ret = task_func(*args, **kwargs)
                return task_ret
            except Exception as e:
                print(f"fail {str(e)}")
                time.sleep(time_interval)

    @functools.wraps(task_func)
    async def async_wrapper(*args, **kwargs):
        # 异步循环重试
        start_time = time.time()
        for retry_count in range(max_retry_count):
            print(f"execute count {retry_count + 1}")
            use_time = time.time() - start_time
            if max_timeout and use_time > max_timeout:
                # 超出最大超时时间
                print(f"execute timeout, use time {use_time}s, max timeout {max_timeout}")
                return

            try:
                return await task_func(*args, **kwargs)
            except Exception as e:
                print(f"fail {str(e)}")
                await asyncio.sleep(time_interval)

    # 异步函数判断
    wrapper_func = async_wrapper if asyncio.iscoroutinefunction(task_func) else sync_wrapper
    return wrapper_func

return _task_retry

复制代码


**注意时间等待** **await asyncio.sleep(time\_interval) 会导致函数挂起,程序不会在这里等待,而是去事件循环loop中执行其他的已经就绪的任务,如果其他函数运行时间太久了才切换回来,会导致时间超时,换成 time.sleep()的话其实也没有用,如果函数内部还有异步函数执行还是会切换出去,因此异步的时候感觉超时参数意义不大。**


模拟测试下



@task_retry(max_retry_count=5, time_interval=2, max_timeout=5)
async def user_place_order_async():
“”“异步函数重试案例”“”
a = 1 / 0
print(“user place order success”)
return {“code”: 0, “msg”: “ok”}

async def io_test():
“”“模拟io阻塞”“”
print(“io test start”)
time.sleep(3)
print(“io test end”)
return “io test end”

async def main():
# 同步案例
# ret = user_place_order()
# print(f"user place order ret {ret}")

# 异步案例
# ret = await user_place_order_async()
# print(f"user place order ret {ret}")

# 并发异步
order_ret, io_ret = await asyncio.gather(
    user_place_order_async(),
    io_test(),
)
print(f"io ret {io_ret}")
print(f"user place order ret {order_ret}")

if name == ‘main’:
asyncio.run(main())

out
execute count 1
fail division by zero
io test start
io test end
execute count 2
fail division by zero
execute count 3
execute timeout, use time 5.015768527984619s, max timeout 5
io ret io test end
user place order ret None
复制代码


可以看出执行一遍后自动切换到了 io\_test 中执行由于 io test 中的 **time.sleep(3) 会导致整个线程阻塞,一定要等到io\_test执行完后才会切换回去,然后再执行两遍就超时了,你可能会说都用异步的库,是的异步的库是可以加速,但我想表达就是这时候统计的耗时是整个程序的而不是单独一个函数的。大家可以在评论区帮我想想有没有其他的方法,要么就不要用这个超时参数。**


可以兼容异步函数、然后超时参数可以不配置,影响不大,O(∩\_∩)O~


#### 重试装饰器-最终版


最终版就是利用抛异常的方式来结束超过最大重试次数、最大超时,而不是直接返回None,然后再添加一个可配置捕获指定异常的参数,当发生特定异常的时候才重试。



import time
import asyncio
import functools
from typing import Type

class MaxRetryException(Exception):
“”“最大重试次数异常”“”
pass

class MaxTimeoutException(Exception):
“”“最大超时异常”“”
pass

def task_retry(
max_retry_count: int = 5,
time_interval: int = 2,
max_timeout: int = None,
catch_exc: Type[BaseException] = Exception
):
“”"
任务重试装饰器
Args:
max_retry_count: 最大重试次数 默认 5 次
time_interval: 每次重试间隔 默认 2s
max_timeout: 最大超时时间,单位s 默认为 None,
catch_exc: 指定捕获的异常类用于特定的异常重试 默认捕获 Exception
“”"

def _task_retry(task_func):

    @functools.wraps(task_func)
    def sync_wrapper(*args, **kwargs):
        # 函数循环重试
        start_time = time.time()
        for retry_count in range(max_retry_count):
            print(f"execute count {retry_count + 1}")
            use_time = time.time() - start_time
            if max_timeout and use_time > max_timeout:
                # 超出最大超时时间
                raise MaxTimeoutException(f"execute timeout, use time {use_time}s, max timeout {max_timeout}")

            try:
                task_ret = task_func(*args, **kwargs)
                return task_ret
            except catch_exc as e:
                print(f"fail {str(e)}")
                time.sleep(time_interval)
        else:
            # 超过最大重试次数, 抛异常终止
            raise MaxRetryException(f"超过最大重试次数失败, max_retry_count {max_retry_count}")

    @functools.wraps(task_func)
    async def async_wrapper(*args, **kwargs):
        # 异步循环重试
        start_time = time.time()
        for retry_count in range(max_retry_count):
            print(f"execute count {retry_count + 1}")
            use_time = time.time() - start_time
            if max_timeout and use_time > max_timeout:
                # 超出最大超时时间
                raise MaxTimeoutException(f"execute timeout, use time {use_time}s, max timeout {max_timeout}")

            try:
                return await task_func(*args, **kwargs)
            except catch_exc as e:
                print(f"fail {str(e)}")
                await asyncio.sleep(time_interval)
        else:
            # 超过最大重试次数, 抛异常终止
            raise MaxRetryException(f"超过最大重试次数失败, max_retry_count {max_retry_count}")

    # 异步函数判断
    wrapper_func = async_wrapper if asyncio.iscoroutinefunction(task_func) else sync_wrapper
    return wrapper_func

return _task_retry

@task_retry(max_retry_count=3, time_interval=1, catch_exc=ZeroDivisionError,max_timeout=5)
def user_place_order():
a = 1 / 0
print(“user place order success”)
return {“code”: 0, “msg”: “ok”}

@task_retry(max_retry_count=5, time_interval=2, max_timeout=5)
async def user_place_order_async():
“”“异步函数重试案例”“”
a = 1 / 0
print(“user place order success”)

做了那么多年开发,自学了很多门编程语言,我很明白学习资源对于学一门新语言的重要性,这些年也收藏了不少的Python干货,对我来说这些东西确实已经用不到了,但对于准备自学Python的人来说,或许它就是一个宝藏,可以给你省去很多的时间和精力。

别在网上瞎学了,我最近也做了一些资源的更新,只要你是我的粉丝,这期福利你都可拿走。

我先来介绍一下这些东西怎么用,文末抱走。


(1)Python所有方向的学习路线(新版)

这是我花了几天的时间去把Python所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。

最近我才对这些路线做了一下新的更新,知识体系更全面了。

在这里插入图片描述

(2)Python学习视频

包含了Python入门、爬虫、数据分析和web开发的学习视频,总共100多个,虽然没有那么全面,但是对于入门来说是没问题的,学完这些之后,你可以按照我上面的学习路线去网上找其他的知识资源进行进阶。

在这里插入图片描述

(3)100多个练手项目

我们在看视频学习的时候,不能光动眼动脑不动手,比较科学的学习方法是在理解之后运用它们,这时候练手项目就很适合了,只是里面的项目比较多,水平也是参差不齐,大家可以挑自己能做的项目去练练。

在这里插入图片描述

(4)200多本电子书

这些年我也收藏了很多电子书,大概200多本,有时候带实体书不方便的话,我就会去打开电子书看看,书籍可不一定比视频教程差,尤其是权威的技术书籍。

基本上主流的和经典的都有,这里我就不放图了,版权问题,个人看看是没有问题的。

(5)Python知识点汇总

知识点汇总有点像学习路线,但与学习路线不同的点就在于,知识点汇总更为细致,里面包含了对具体知识点的简单说明,而我们的学习路线则更为抽象和简单,只是为了方便大家只是某个领域你应该学习哪些技术栈。

在这里插入图片描述

(6)其他资料

还有其他的一些东西,比如说我自己出的Python入门图文类教程,没有电脑的时候用手机也可以学习知识,学会了理论之后再去敲代码实践验证,还有Python中文版的库资料、MySQL和HTML标签大全等等,这些都是可以送给粉丝们的东西。

在这里插入图片描述

这些都不是什么非常值钱的东西,但对于没有资源或者资源不是很好的学习者来说确实很不错,你要是用得到的话都可以直接抱走,关注过我的人都知道,这些都是可以拿到的。

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友,可以戳这里获取

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

  • 15
    点赞
  • 24
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值