海豚调度 - 博客园

2025年4月

摘要：在 DolphinScheduler 中，调度时对时间参数的使用非常重要，尤其是当你在数据处理、ETL 任务或其他需要依赖时间范围的任务场景中。DolphinScheduler 允许通过多种方式灵活地配置时间参数，以适应不同的任务调度需求。以下是时间参数在 DolphinScheduler 调度中的阅读全文

posted @ 2025-04-09 14:49 海豚调度阅读(2120) 评论(0) 推荐(0)

2025年，怎么靠技术传播自我“破圈”？

摘要：亲爱的社区小伙伴们，Apache DolphinScheduler 2025年 Meetup 讲师&议题开始征集。提升自我价值，实现自我“破圈”，这里是你最好的舞台，快来一起开启你的技术传播之旅吧！如果你热爱Apache DolphinScheduler，对大数据调度有着深厚的兴趣，并且愿意将你关阅读全文

posted @ 2025-04-02 11:19 海豚调度阅读(57) 评论(0) 推荐(0)

GSoC谷歌编程之夏2025招募中，Apache DolphinScheduler需要你的提案！

摘要： GSoC谷歌编程之夏活动火热进行中！今年，Apache DolphinScheduler项目也依然参与其中，设立了有趣且有挑战性的项目任务，与通用OIDC认证有关。欢迎有才华的你们来挑战！ GSoC的起源与目的 GSoC 即 Google Summer of Code（谷歌编程之夏），是谷歌公司发起阅读全文

posted @ 2025-04-01 18:09 海豚调度阅读(214) 评论(0) 推荐(0)

2025年3月

纯干货 | Dolphinscheduler Master模块源码剖析

摘要：此前我们曾用万字长文解释了Apache DolphinScheduler的Worker模块源码，今天，我们再来一起看看Master模块源码的原理。 Master Slot计算核心代码逻辑： org.apache.dolphinscheduler.server.master.registry.Mas 阅读全文

posted @ 2025-03-31 14:35 海豚调度阅读(380) 评论(0) 推荐(0)

网易邮箱DolphinScheduler迁移实战：从部署到优化，10倍效率提升的内部经验

摘要： ——企业级调度系统平滑迁移指南，附避坑全流程！随着互联网的飞速发展，电子邮件作为重要的信息交流工具之一，其数据处理和任务调度的需求日益增长。网易邮箱作为国内领先的电子邮件服务提供商，为了更好地应对海量数据的处理和任务调度挑战，引入了DolphinScheduler平台，并在实际应用中进行了深入的部阅读全文

posted @ 2025-03-27 10:05 海豚调度阅读(328) 评论(0) 推荐(0)

90%企业踩坑的数据管道管理问题，4大技术方案实现效率翻倍！

摘要：在数据驱动系统（如分析平台）中，一个常见的挑战是管理数据管道之间的依赖关系。阅读全文

posted @ 2025-03-18 17:56 海豚调度阅读(191) 评论(0) 推荐(0)

巧用输出变量，提升Dolphinscheduler工作流灵活性和可维护性

摘要：输出变量是 DolphinScheduler 任务调度中实现数据流动与任务协作的核心机制，通过显式定义和传递参数，解决了跨节点数据共享、优先级冲突等问题，同时支持复杂流程编排（如子流程、条件分支）。合理使用输出变量能显著提升工作流的灵活性和可维护性。本文将介绍 DolphinScheduler 中重要的输出变量及其使用方法。阅读全文

posted @ 2025-03-18 17:43 海豚调度阅读(381) 评论(0) 推荐(0)

让海豚替你跑SQL！DolphinScheduler高效配置三步曲

摘要：今天，让我们来深入探讨DolphinScheduler中一种常见的任务类型：SQL任务。 SQL任务是DolphinScheduler中非常重要的一种任务类型，它允许用户在调度系统中运行SQL语句，通常用于数据处理、数据分析等场景。下面我分别以为MySQL和Hive为例，详细介绍如何在Dolphin 阅读全文

posted @ 2025-03-18 17:08 海豚调度阅读(562) 评论(0) 推荐(0)

2025年开源世界：系好安全带，颠覆即将来临！

摘要：图片由 Diana Gonçalves Osterfeld 提供译自 | The New Stack 作者 | Heather Joslyn 在新的一年中，预计会出现有关许可、开源 AI 定义、安全与合规以及如何支付志愿维护者报酬的新紧张局势。开源软件世界有时会给人一种泡沫般的感觉——在这里，一阅读全文

posted @ 2025-03-14 09:30 海豚调度阅读(160) 评论(0) 推荐(0)

网易邮箱如何用大数据任务调度实现海量邮件数据处理？Apache DolphinScheduler用户交流会上来揭秘！

摘要：一定不要错过这场精彩的线上用户交流会！在这里，你将有机会深入了解网易邮箱关于Apache DolphinScheduler平台的实际应用案例，汲取大厂的前沿实践经验。阅读全文

posted @ 2025-03-10 15:55 海豚调度阅读(61) 评论(0) 推荐(0)

公告