摘要: 亲爱的社区小伙伴们,Apache DolphinScheduler 2025年 Meetup 讲师&议题开始征集。提升自我价值,实现自我“破圈”,这里是你最好的舞台,快来一起开启你的技术传播之旅吧! 如果你热爱Apache DolphinScheduler,对大数据调度有着深厚的兴趣,并且愿意将你关 阅读全文
posted @ 2025-04-02 11:19 海豚调度 阅读(4) 评论(0) 推荐(0) 编辑
摘要: GSoC谷歌编程之夏活动火热进行中!今年,Apache DolphinScheduler项目也依然参与其中,设立了有趣且有挑战性的项目任务,与通用OIDC认证有关。欢迎有才华的你们来挑战! GSoC的起源与目的 GSoC 即 Google Summer of Code(谷歌编程之夏),是谷歌公司发起 阅读全文
posted @ 2025-04-01 18:09 海豚调度 阅读(13) 评论(0) 推荐(0) 编辑
摘要: 此前我们曾用万字长文解释了Apache DolphinScheduler的Worker模块源码,今天,我们再来一起看看Master模块源码的原理。 Master Slot计算 核心代码逻辑: org.apache.dolphinscheduler.server.master.registry.Mas 阅读全文
posted @ 2025-03-31 14:35 海豚调度 阅读(14) 评论(0) 推荐(0) 编辑
摘要: ——企业级调度系统平滑迁移指南,附避坑全流程! 随着互联网的飞速发展,电子邮件作为重要的信息交流工具之一,其数据处理和任务调度的需求日益增长。网易邮箱作为国内领先的电子邮件服务提供商,为了更好地应对海量数据的处理和任务调度挑战,引入了DolphinScheduler平台,并在实际应用中进行了深入的部 阅读全文
posted @ 2025-03-27 10:05 海豚调度 阅读(42) 评论(0) 推荐(0) 编辑
摘要: 在数据驱动系统(如分析平台)中,一个常见的挑战是管理数据管道之间的依赖关系。 阅读全文
posted @ 2025-03-18 17:56 海豚调度 阅读(58) 评论(0) 推荐(0) 编辑
摘要: 输出变量是 DolphinScheduler 任务调度中实现数据流动与任务协作的核心机制,通过显式定义和传递参数,解决了跨节点数据共享、优先级冲突等问题,同时支持复杂流程编排(如子流程、条件分支)。合理使用输出变量能显著提升工作流的灵活性和可维护性。本文将介绍 DolphinScheduler 中重要的输出变量及其使用方法。 阅读全文
posted @ 2025-03-18 17:43 海豚调度 阅读(27) 评论(0) 推荐(0) 编辑
摘要: 今天,让我们来深入探讨DolphinScheduler中一种常见的任务类型:SQL任务。 SQL任务是DolphinScheduler中非常重要的一种任务类型,它允许用户在调度系统中运行SQL语句,通常用于数据处理、数据分析等场景。下面我分别以为MySQL和Hive为例,详细介绍如何在Dolphin 阅读全文
posted @ 2025-03-18 17:08 海豚调度 阅读(59) 评论(0) 推荐(0) 编辑
摘要: 图片由 Diana Gonçalves Osterfeld 提供 译自 | The New Stack 作者 | Heather Joslyn 在新的一年中,预计会出现有关许可、开源 AI 定义、安全与合规以及如何支付志愿维护者报酬的新紧张局势。 开源软件世界有时会给人一种泡沫般的感觉——在这里,一 阅读全文
posted @ 2025-03-14 09:30 海豚调度 阅读(44) 评论(0) 推荐(0) 编辑
摘要: 一定不要错过这场精彩的线上用户交流会!在这里,你将有机会深入了解网易邮箱关于Apache DolphinScheduler平台的实际应用案例,汲取大厂的前沿实践经验。 阅读全文
posted @ 2025-03-10 15:55 海豚调度 阅读(11) 评论(0) 推荐(0) 编辑
摘要: 各位热爱DolphinScheduler的小伙伴们,今年2月份的社区月报如期而至,更新了DolphinScheduler项目和社区在本月的重大进展,请查收! DolphinScheduler月度Merge Stars 感谢以下小伙伴在2025年2月期间为Apache DolphinScheduler 阅读全文
posted @ 2025-03-10 15:44 海豚调度 阅读(26) 评论(0) 推荐(0) 编辑
点击右上角即可分享
微信分享提示