任务调度利器celery详解(1)
- Celery是一个简单、灵活且可靠的,处理大量消息的分布式系统,专注于实时处理的异步任务队列,同时也支持任务调度,由三部分构成,消息中间件(message broker, 包括Redius,RabbitMQ )、任务执行单元(worker)、任务结果存储(task result store),一般用于异步任务(包括发送邮件、消息推送等)和定时任务(如数据统计)
- 安装:
pip install celery
pip install redis
pip install celery-with-redis
- 在启动worker时有一个小插曲:
‘’’
def _connparams(self, async=False, _r210_options=(
^
SyntaxError: invalid syntax
‘’’
我查了好久才知道,这是由于async在python3.7已经是关键字,但是celery4.2版本没有更新导致的。此问题将在下一个发布版本修复。目前只能将celery文件中的async命名为其他变量名或者换一个python3.6的编辑器,替换要替换多处,因此最好是换一个python3.6的编辑器。 - tasks.py
from celery import Celery
# broker设置中间件,backend设置后端存储
app = Celery('app_name',broker='redis://127.0.0.1:6379/5',backend='redis://127.0.0.1:6379/6')
@app.task(name='task_name') # 被标记的都属于这个app的任务
def add(x,y):
return x+y
if __name__ == "__main__":
result = add.delay(1,2)
print(result)
在终端启动:
celery worker -A tasks --loglevel=info
大功告成