Celery自动死亡解决办法

该脚本使用Python的argparse模块处理命令行参数,启动并监控Celeryworker。它按照指定的配置(如loglevel=info,concurrency=5)运行worker,并将输出追加到日志文件中。当检测到CRITICAL/MainProcess时,脚本会终止worker进程。
摘要由CSDN通过智能技术生成
#!/EMCDisk1/home/software/Python-3.6.12/bin/python

import argparse
import subprocess

# 添加命令行参数
parser = argparse.ArgumentParser(description="Start a Celery worker and monitor its output.")
parser.add_argument('worker', help="Name of the worker.")
args = parser.parse_args()

worker = args.worker

cmd = f'/EMCDisk1/home/software/Python-3.6.12/bin/celery -A tasks worker -l info -n {worker} --loglevel=info --concurrency=5'

with open(f'{worker}.log','a') as f:

    while True:

        p = subprocess.Popen(cmd, shell=True, stdout=subprocess.PIPE, stderr=subprocess.STDOUT,bufsize=0,universal_newlines=True)

        while p.poll() is None:
            stdout = p.stdout.readline().strip()
            if stdout:
                f.writelines(stdout+'\n')
                if 'CRITICAL/MainProcess' in stdout:
                    p.terminate()
                    try:
                        p.wait(timeout=10)
                    except subprocess.TimeoutExpired:
                        p.kill()
                    break


评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值