python
文章平均质量分 74
chenzuoli
chenzuoli.github.io
展开
-
ffmpeg图片视频编辑器工具的安装与使用
FFmpeg是一个开源的命令行工具,广泛用于处理视频和音频文件。原创 2024-07-07 16:04:25 · 198 阅读 · 0 评论 -
html加载后端数据较慢问题记载
网站页面最近加载很慢,这里记录一下,一步一步查问题的思路。原创 2024-04-07 21:50:00 · 444 阅读 · 0 评论 -
说下调度系统airflow的一些问题
airflow它有许多优点也有一些缺点,之前的文章写了它的优点、特点,下面来说下它的问题。原创 2022-03-06 09:42:47 · 568 阅读 · 0 评论 -
Airflow安装详解(附airflow.cfg配置详解)
标题: Airflow安装详解日期: 2021-11-16 21:27:21标签: [airflow]分类: 调度系统在讲airflow安装之前,我们先来了解下airflow的架构,这有助于我们去理解安装的步骤到底是干嘛的。来看这篇文章:airflow架构我讲的airflow是1.10.14版本的哈。所以,如果我们搭建airflow是做大量的任务调度,那么就推荐元数据库使用mysql/postgresql,消息队列使用redis/rabbitmq。我以mysql和rabbitmq为例来.原创 2021-11-27 17:31:23 · 6604 阅读 · 0 评论 -
Airflow元数据表dag介绍
标题: Airflow元数据表dag介绍日期: 2021-11-13 09:37:09标签: [airflow, dag]分类: 调度系统大家好,我是Lee。上次介绍了airflow的元数据表log,里面的主要字段event是干嘛的,怎么识别手动操作和系统操作,今天就说下dag表中的一些字段,是什么意思,该怎么用。我使用的airflow是1.10.14版本。先看下表结构:FieldTypeNullKeyDefaultExtradag_idvarchar(2.原创 2021-11-13 10:50:47 · 1308 阅读 · 0 评论 -
如何理解airflow中的execution_date
标题: 如何理解airflow中的execution_date日期: 2021-11-11 20:55:45标签: [airflow]分类: 调度系统大家好,我是Lee,今天说下贯穿airflow调度系统的基础变量execution_date,它怎么理解。airflow调度单元是dag,每到dag该运行的时候,airflow就会启动一个dag_run实例,该实例存储在dag_run表中,这张表中的主键是:dag_id和execution_date,即表示每个dag在同一时刻,只能启动一个实例.原创 2021-11-11 22:37:41 · 1806 阅读 · 1 评论 -
airflow中log表详解
标题: airflow中log表详解日期: 2021-11-08 21:03:15标签: [airflow, log]分类: 调度系统上次介绍了airflow元数据库表的大致作用,是干什么的,存储了哪些信息,接下来,我们就来一个一个介绍,表里面的字段是什么意思,我们怎么使用。图片来自pexels这是表结构:fieldtypenullkeydefaultextraidint(11)NOPRI(NULL)auto_incrementdttmtim.原创 2021-11-08 23:05:30 · 1187 阅读 · 0 评论 -
airflow元数据库表详解
标题: airflow元数据库表详解日期: 2021-10-28 21:32:26标签: [airflow, 调度系统]分类: 调度系统airflow调度系统,基本介绍看这篇文章:https://chenzuoli.github.io/2021/10/16/airflow%E4%BB%8B%E7%BB%8D/airflow架构,看这篇文章:https://chenzuoli.github.io/2021/10/24/airflow%E6%9E%B6%E6%9E%84%E8%AF%A6%E8.原创 2021-10-30 14:12:25 · 1415 阅读 · 0 评论 -
python调用java的方法-JPype的简单使用
标题: python调用java的方法-JPype的简单使用日期: 2021-07-29 22:30:05标签: [python,java,jpype]分类: Python今天来说下,python调用java的方法,有些时候,数据处理比较麻烦,像加解密,可能之前的技术栈用java,或者对接的业务方提供了java版的api,但是公司使用的是技术栈是python,平台也是python,不方便使用java编写,并且也不好将java代码用python代码再实现一遍时,就需要用到python调用java了。.原创 2021-07-29 23:42:33 · 1853 阅读 · 0 评论