关闭页面特效
文章分类 - airflow
任务调度
airflow实战总结
摘要:airflow 介绍 airflow是一款开源的,分布式任务调度框架,它将一个具有上下级依赖关系的工作流,组装成一个有向无环图。 特点: 分布式任务调度:允许一个工作流的task在多台worker上同时执行 可构建任务依赖:以有向无环图的方式构建任务依赖关系 task原子性:工作流上每个task都是
阅读全文
Airflow实战
摘要:1. 安装及初始化 # airflow needs a home, ~/airflow is the default, # but you can lay foundation somewhere else if you prefer # (optional) export AIRFLOW_HOME
阅读全文
Airflow入门介绍
摘要:1, 简介 Airflow是一个可编程,调度和监控的工作流平台,基于有向无环图(DAG),airflow可以定义一组有依赖的任务,按照依赖依次执行。airflow提供了丰富的命令行工具用于系统管控,而其web管理界面同样也可以方便的管控调度任务,并且对任务运行状态进行实时监控,方便了系统的运维和
阅读全文