随笔- 807
文章- 150
评论- 23
阅读-
151万
文章分类 - 大数据-架构-任务调度 airflow
Airflow DAG之间依赖
摘要:DAG之间的依赖关系可以通过编写ExternalTaskSensor()去指定依赖哪个dag的id和task。 1、execution_date_fn vim test.py # coding: utf-8from airflow import DAGfrom airflow_clickhouse_
阅读全文
关于Airflow跨DAG依赖总结(转载)
摘要:关于Airflow跨DAG依赖总结单个DAG中Task之间的依赖这是最常见的Task之间的依赖,在DAG中有多种方式指定依赖关系 # 定义DAG dag = DAG(...)# 定义task_atask_a = BashOperator(...) # 定义task_btask_b = BashOpe
阅读全文