随笔- 807  文章- 150  评论- 23  阅读- 151万 

文章分类 -  大数据-架构-任务调度 airflow

Airflow DAG之间依赖
摘要:DAG之间的依赖关系可以通过编写ExternalTaskSensor()去指定依赖哪个dag的id和task。 1、execution_date_fn vim test.py # coding: utf-8from airflow import DAGfrom airflow_clickhouse_ 阅读全文
posted @ 2022-12-26 10:06 xibuhaohao 阅读(767) 评论(0) 推荐(0) 编辑
关于Airflow跨DAG依赖总结(转载)
摘要:关于Airflow跨DAG依赖总结单个DAG中Task之间的依赖这是最常见的Task之间的依赖,在DAG中有多种方式指定依赖关系 # 定义DAG dag = DAG(...)# 定义task_atask_a = BashOperator(...) # 定义task_btask_b = BashOpe 阅读全文
posted @ 2022-02-16 22:39 xibuhaohao 阅读(1786) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示