提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档
前言
提示:这里可以添加本文要记录的大概内容:
上一篇记录了如何修改airflow的配置文件,并更新部署在K8s cluster上面的airflow,本篇将记录如何building the image 以及添加 dags文件
提示:以下是本篇文章正文内容,下面案例可供参考
一、Building the image
参照 Ariflow Doc 介绍运行dags需要的第3方package or library,主要通过以下两种方式 Extending or customizing the image.具体2种方式的优缺点参照 Airflow Doc链接,本篇日记记录如何通过Extending image的方式来build the image
- Add requirements.txt 文件,例如如下内容。
airflow-provider-great-expectations==0.1.4
matplotlib==3.3.2
- 创建Dockerfile 文件&#