flask中使用celery的Task操作数据库(SQLAlchemy)

flask中使用celery的Task操作数据库(SQLAlchemy)

Celery是一个简单高效的实时分布式任务队列系统, 可以用于异步执行任务,结构上分为任务生产者,任务调度者broker,任务消费者worker。
场景:基于后台作业时有可能长时间对数据库进行更新写入等,例如,每天定时更新从网络上爬虫取下来的数据,update到对应的基金行数据中。

项目的目录结构

项目结构

各个文件说明

我们主要的做法是将在manage.py当中创建celery实例对象,然后把celery对象引入app/init.py文件中的create_app函数中更新celery配置。app/tasks.py单独存放给celery的任务,models中的ORM也可以方便导入。
manage.py文件:

import config
from app import create_app
from celery import Celery

def make_celery(app_name):
    broker = getattr(config[os.getenv('FLASK_ENV') or 'default'], "CELERY_BROKER_URL")
    backend = getattr(config[os.getenv('FLASK_ENV') or 'default'], "CELERY_BACKEND_URL")

    celery = Celery(
    
  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
使用Celery可以很方便地实现定时任务和根据数据库的数据进行批量推送邮件。以下是一个示例代码,演示如何使用Celery定时发送根据数据库的数据进行批量邮件推送: 1. 安装Celery和Redis ```bash pip install celery redis ``` 2. 创建Celery实例 ```python # tasks.py from celery import Celery app = Celery('tasks', broker='redis://localhost:6379/0') ``` 3. 编写发送邮件的函数 ```python # tasks.py import smtplib from email.mime.text import MIMEText from myapp.models import User # 假设我们的User模型在myapp.models定义 @app.task def send_email(recipient, subject, body): # 创建邮件内容 message = MIMEText(body) message['From'] = 'sender@example.com' message['To'] = recipient message['Subject'] = subject # 连接邮件服务器 server = smtplib.SMTP('smtp.example.com', 587) server.starttls() server.login('username', 'password') # 发送邮件 server.sendmail('sender@example.com', recipient, message.as_string()) # 关闭连接 server.quit() ``` 4. 编写定时任务 ```python # tasks.py from datetime import datetime, timedelta from myapp.models import User @app.task def send_batch_emails(): # 从数据库获取收件人列表 recipients = User.objects.values_list('email', flat=True) subject = 'Test Email' body = 'This is a test email.' # 发送邮件 for recipient in recipients: send_email.apply_async(args=[recipient, subject, body]) @app.task def send_periodic_emails(): # 每天10点发送一次邮件 schedule_time = datetime.now().replace(hour=10, minute=0, second=0) if schedule_time < datetime.now(): schedule_time += timedelta(days=1) send_batch_emails.apply_async(eta=schedule_time) ``` 5. 启动Celery ```bash celery -A tasks worker --loglevel=info ``` 6. 定时发送邮件 ```python # 在任意位置调用 send_periodic_emails() 函数即可 from tasks import send_periodic_emails send_periodic_emails.delay() ``` 在上面的代码,我们使用Celery创建了一个异步任务send_email(),用于发送单个邮件。然后,我们创建了一个异步任务send_batch_emails(),用于从数据库获取收件人列表,为每个收件人创建一个send_email任务,并异步发送邮件。 最后,我们创建了一个定时任务send_periodic_emails(),用于每天10点发送一次邮件。我们使用Celery的apply_async()方法设置任务的执行时间,并在启动Celery后调用该函数即可。 您可以根据自己的需要修改邮件内容、从数据库获取收件人列表和定时任务的时间,并使用类似的方法来实现根据数据库的数据进行定时批量邮件推送。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值