会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
sea的博客
博客园
首页
新随笔
联系
订阅
管理
2021年3月9日
工作流开源任务调度框架2--Azkaban
摘要: Azkaban是什么? Azkaban是一套简单的任务调度服务,整体包括三部分webserver、dbserver、executorserver。 是linkin的开源项目,开发语言为Java。 Azkaban是由Linkedin开源的一个批量工作流任务调度器。用于在一个工作流内以一个特定的顺序运行
阅读全文
posted @ 2021-03-09 15:57 sea的博客
阅读(649)
评论(0)
推荐(0)
编辑
工作流开源调度框架1- airflow
摘要: airflow 介绍 airflow是一款开源的,分布式任务调度框架,它将一个具有上下级依赖关系的工作流,组装成一个有向无环图。 特点: 分布式任务调度:允许一个工作流的task在多台worker上同时执行 可构建任务依赖:以有向无环图的方式构建任务依赖关系 task原子性:工作流上每个task都是
阅读全文
posted @ 2021-03-09 15:54 sea的博客
阅读(681)
评论(0)
推荐(0)
编辑
公告