海豚调度 - 博客园

2022年10月

突破单点瓶颈、挑战海量离线任务，Apache Dolphinscheduler在生鲜电商领域的落地实践

摘要：惊喜：文末有插件推荐，随着大数据的进一步发展，不管是离线任务量还是实时任务量都变得越来越多，对调度系统的要求也越来越高，不仅要求系统稳定还要求操作简单，上手方便。阅读全文

posted @ 2022-10-21 14:49 海豚调度阅读(1267) 评论(0) 推荐(0)

挑战海量数据：基于Apache DolphinScheduler对千亿级数据应用实践

摘要：点亮 ⭐️ Star · 照亮开源之路 GitHub:https://github.com/apache/dolphinscheduler 精彩回顾近期，初灵科技的大数据开发工程师钟霈合在社区活动的线上 Meetup 上中，给大家分享了《基于 Apache DolphinScheduler 对千亿阅读全文

posted @ 2022-10-11 16:55 海豚调度阅读(2367) 评论(0) 推荐(0)

Apache Dolphin Scheduler 3.0.1 发布，对核心及UI相关进行优化

摘要：点亮 ⭐️ Star · 照亮开源之路 GitHub:https://github.com/apache/dolphinscheduler 版本发布感谢本次的 Release Manager --@zhuangchong,是他主导了我们这个版本的发布流程，引导社区进行版本内容沟通，发版前的问题阅读全文

posted @ 2022-10-10 11:50 海豚调度阅读(457) 评论(0) 推荐(0)

2022年9月

DophineSheduler上下游任务之间动态传参案例及易错点总结

摘要：作者简介淡丹数仓开发工程师 5年数仓开发经验，目前主要负责百得利MOBY新车业务二手车业务及售后服务业务系统数仓建设业务需求在ETL任务之间调度时，我们有的时候会需要将上游的计算结果作为参数传入到下游，针对这种业务需求，海豚调度器为我们提供了一些功能。具体如下： DolphinS 阅读全文

posted @ 2022-09-28 11:48 海豚调度阅读(5330) 评论(2) 推荐(0)

ApacheCon Asia 2022 精彩回顾 | 如何让更多人从大数据中获益？

摘要：点亮 ⭐️ Star · 照亮开源之路 GitHub:https://github.com/apache/dolphinscheduler 在 ApacheCon Asia 2022 Meetup上，有着十余年大数据开发工作经验，来自某银行离线数据工厂开发工具负责人陈卫老师分享了如何让更多人从大数阅读全文

posted @ 2022-09-20 13:29 海豚调度阅读(93) 评论(0) 推荐(0)

一文读懂，硬核 Apache DolphinScheduler3.0 源码解析

摘要：点亮 ⭐️ Star · 照亮开源之路 https://github.com/apache/dolphinscheduler 本文目录 1 DolphinScheduler的设计与策略 1.1 分布式设计 1.1.1 中心化 1.1.2 去中心化 1.2 DophinScheduler架构设计阅读全文

posted @ 2022-09-15 17:49 海豚调度阅读(4882) 评论(0) 推荐(1)

Apache DolphinScheduler PMC：开源不一定也要九死一生

摘要：点亮 ⭐️ Star · 照亮开源之路 GitHub:https://github.com/apache/dolphinscheduler 参与开源已经快3年了，这次在Meetup上没有分享纯技术的话题，其初衷是想带这大家从一个开源社区维护者的视角来看开源，希望大家能从中获取到一些感悟，当然这次阅读全文

posted @ 2022-09-02 11:40 海豚调度阅读(403) 评论(0) 推荐(0)

2022年8月

Apache DolphinScheduler 简单任务定义及复杂的跨节点传参

摘要：点亮 ⭐️ Star · 照亮开源之路 GitHub:https://github.com/apache/dolphinscheduler Apache DolphinScheduler是一款非常不错的调度工具，可单机可集群可容器，可调度sql、存储过程、http、大数据等，也可使用shell 阅读全文

posted @ 2022-08-30 21:18 海豚调度阅读(3132) 评论(0) 推荐(0)

Apache DolphinScheduler 3.0.0 正式版发布！

摘要：

点亮 ⭐️ Star · 照亮开源之路 GitHub:https://github.com/apache/dolphinscheduler 版本发布 2022/8/10 2022 年 8 月 10 日，Apache DolphinScheduler 在经过 3.0.0 alpha、3.0.0 阅读全文

posted @ 2022-08-11 12:15 海豚调度阅读(2312) 评论(0) 推荐(0)

8月Meetup | “数据调度+分析引擎”解锁企业数字化转型之路

摘要：编辑切换为居中添加图片注释，不超过 140 字（可选）大数据是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，而大数据作为企业运转的基础，只有经过提供数据采集、存储、计算、分析、调度、管理、治理等过程，才能为企业所用。而海豚调度作为数据调度工具的先行阅读全文

posted @ 2022-08-10 15:26 海豚调度阅读(177) 评论(0) 推荐(0)

公告