Python实现airflow任务及时性校验

最新推荐文章于 2024-05-10 17:41:15 发布

Anla Likes Sunshine

最新推荐文章于 2024-05-10 17:41:15 发布

阅读量270

点赞数

分类专栏： python 大数据文章标签： python 大数据

本文链接：https://blog.csdn.net/AnlaGodness/article/details/114977978

版权

本文介绍了如何使用Python连接并操作MySQL数据库，针对Airflow任务进行及时性校验。内容包括连接MySQL获取版本信息、创建表、插入数据及查询数据的基本步骤，并给出了在操作中可能遇到的错误及解决办法。

摘要由CSDN通过智能技术生成

Python实现airflow任务及时性校验
1、Python连接Mysql数据库，获取版本号：

#!/usr/bin/python
# -*- coding: UTF-8 -*-

import pymysql

# 打开数据库连接
db = pymysql.connect("host_id", "user_name", "password", "db_name", charset='utf8' )

# 使用cursor()方法获取操作游标 
cursor = db.cursor()

# 使用execute方法执行SQL语句
cursor.execute("SELECT VERSION()")

# 使用 fetchone() 方法获取一条数据
data = cursor.fetchone()

print("Database version : %s " % data)

# 关闭数据库连接
db.close()

2、Python创建Mysql表：
在这里插入图片描述

#!/usr/bin/python
# -*- coding: UTF-8 -*-

import pymysql

# 打开数据库连接
db = pymysql.connect("host_id", "user_name", "password", "db_name", charset='utf8' )

# 使用cursor()方法获取操作游标 
cursor = db.cursor()

# 使用 execute() 方法执行 SQL，如果表存在则删除
cursor.execute("DROP TABLE IF EXISTS notify_group")
 
# 使用预处理语句创建表