airflow报ModuleNotFoundError: No module named ‘dags‘原因和解决方法

文章讲述了在Airflow项目中遇到ModuleNotFoundError的问题,原因在于airflow默认从dags目录查找模块。解决方法是导入时不包含dags,并提供了一个示例,展示了如何在自定义模块中调用并使用函数。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

ModuleNotFoundError: No module named ‘dags’
原因:airflow默认是从dags目录下开始搜所有模块,如果你加上dags目录名,就相当于在dags目录下找dags包。
解决方法:导入的时候,去掉dags,详细可以参考下面案例

.
└── airflow_project
    ├── airflow.cfg
    ├── dags
    │   ├── ceshi
    │   │   ├── data_sensor.py
    │   │   ├── first.py
    │   │   ├── __init__.py
    │   │   ├── test.sh
    │   │   └── virtual.py
    │   ├── __init__.py
    │   ├── modules  # 自定义模块或者函数
    │   │   ├── __init__.py
    │   │   └── utils.py
    ├── logs
    │   └── scheduler
    │       ├── 2023-10-19
    ├── plugins
    │   ├── date_utils.py
    │   ├── event_listener.py
    └── webserver_config.py

目录结构如上面所示,我们只需要把自定义模块放dags目录里,然后调用就可以,代码如下:

from airflow import DAG
from airflow.operators.python import PythonOperator
from datetime import datetime, timedelta
# 导入自定义函数
from modules.utils import get_next_monday

def get_func():
	a = get_next_monday()
	print(a)
	return a

with DAG('module_test',tags=['test'], schedule='* */1 * * *', start_date=datetime(2023, 10,18), catchup=False) as dag:
	python_openrator = PythonOperator(task_id='py_ceshi', python_callable=get_func)
	python_openrator

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值