海豚调度 - 博客园

2025年11月

摘要：本文基于海豚调度3.1.9版本将系统梳理 DolphinScheduler 中各类参数的使用方法，涵盖内置参数、衍生函数、日期计算、全局变量设置以及跨任务参数传递等核心场景，助你彻底掌握参数使用的“正确姿势”。阅读全文

posted @ 2025-11-12 14:22 海豚调度阅读(623) 评论(0) 推荐(0)

摘要：今年的开源之夏活动已接近尾声，Apache DolphinScheduler 社区的开发者在经过漫长的开发过程收获了自己的成果，同时为 Apache DolphinScheduler 带来了全新的任务插件 gRPC。阅读全文

posted @ 2025-11-12 11:47 海豚调度阅读(34) 评论(0) 推荐(0)

摘要：本次版本重点围绕性能优化、稳定性增强、文档完善与关键问题修复展开，为广大用户带来更加顺畅、可靠的数据工作流编排体验。阅读全文

posted @ 2025-11-05 11:51 海豚调度阅读(182) 评论(0) 推荐(0)

摘要：随着业务规模扩大，Azkaban 的短板逐渐暴露。阅读全文

posted @ 2025-11-05 11:22 海豚调度阅读(93) 评论(0) 推荐(0)

2025年10月

摘要：最近使用 Apache DolphinScheduler 调度任务，不可避免地使用到【补数据】功能，经过不断尝试，终于成功运行了【补数据】功能，以此帖记录。阅读全文

posted @ 2025-10-29 14:40 海豚调度阅读(242) 评论(0) 推荐(0)

摘要：本月聚焦功能修复与性能优化，修复工作流计划设置、HDFS 存储启动等关键问题，优化数据库索引、Quartz 数据源配置等提升性能，11 位贡献者共完成多项 PR，保障系统稳定高效运行。阅读全文

posted @ 2025-10-29 11:19 海豚调度阅读(57) 评论(0) 推荐(0)

摘要：近日，第十届“创客中国”北京市中小企业创新创业大赛暨“创客北京2025”创新创业大赛结果揭晓，北京白鲸开源科技有限公司凭借“白鲸开源-Agentic AI 时代下的数据基础设施平台”，荣登企业组 TOP150，并获得大赛组委会颁发的获奖证书。阅读全文

posted @ 2025-10-23 16:29 海豚调度阅读(16) 评论(0) 推荐(0)

摘要：本文聚焦某大数据团队的实战优化经验，系统阐述该团队的核心实践：针对任务依赖机制的源码级改造（新增节点级别判断逻辑）、与Open-Falcon的告警对接升级（实现信息精简、优先级分级与分群推送），以及组件监控体系的构建（含节点存活检测与自愈能力）等。阅读全文

posted @ 2025-10-23 16:12 海豚调度阅读(112) 评论(0) 推荐(0)

摘要：今年的 GSoC 已近尾声，在这场代码开发盛宴中，Apache DolphinScheduler 的开发者们积极参与，取得了一项对用户意义重大的成果——引入通用 OIDC 认证，实现无缝安全访问。阅读全文

posted @ 2025-10-23 10:47 海豚调度阅读(100) 评论(0) 推荐(0)

摘要：本文将介绍 Apache DolphinScheduler 的 Worker 负载均衡，含加权随机、平滑轮询、线性负载（默认）三种算法，及配置修改、Worker 权重与预热机制，并细述各算法原理。详情可参考文末源文档地址。阅读全文

posted @ 2025-10-15 18:48 海豚调度阅读(108) 评论(0) 推荐(0)