DolphinScheduler工作流调度引擎 致力于解决数据处理流程中错综复杂的依赖关系
注:由于文章篇幅有限,获取资料可直接扫二维码,更有深受好评的大数据实战精英+架构师好课等着你。
大数据技术交流QQ群:207540827
DS是什么
Apache DolphinScheduler是一个分布式去中心化,易扩展的可视化DAG工作流任务调度系统。致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。
DolphinScheduler曾用名为“EasyScheduler”,由易观开发,美国时间2019年8月29日,正式通过顶级开源组织Apache基金会的投票决议,以全票通过的优秀表现正式成为Apache孵化器项目。由于名称已在国外某App使用,经社区讨论与投票后改名为DolphinScheduler,简称”DS”, 中文名 “小海豚调度”(海豚聪明、人性化,有左右脑可互相换班,终生不用睡觉)。起这个名字就是希望DolphinScheduler像它的名字一样,成为一个“开箱即用”的灵活易用的调度系统。
DS官网
https://dolphinscheduler.apache.org/en-us/index.html
跟Azkaban等流行的工作流调度引擎比较
谁在使用DS