海豚调度 - 博客园

2025年10月

吃透 DolphinScheduler 负载均衡：3 大核心算法 + 底层逻辑全解析

摘要：本文将介绍 Apache DolphinScheduler 的 Worker 负载均衡，含加权随机、平滑轮询、线性负载（默认）三种算法，及配置修改、Worker 权重与预热机制，并细述各算法原理。详情可参考文末源文档地址。阅读全文

posted @ 2025-10-15 18:38 海豚调度阅读(81) 评论(0) 推荐(0)

3.1.8<3.2.0<3.3.1，Apache DolphinScheduler集群升级避坑指南

摘要： 3.3.1版本机器启动方式变得更复杂了，但是集群功能变得更好用了，资源利用率提高了。阅读全文

posted @ 2025-10-10 11:34 海豚调度阅读(308) 评论(0) 推荐(0)

2025年9月

GOSIM 开源出海工作坊：给开源创业者的忠告

摘要： “出海”两个字，在开源语境里不是浪漫叙事，而是生死抉择。阅读全文

posted @ 2025-09-25 15:07 海豚调度阅读(81) 评论(0) 推荐(0)

（二）3.1.9 生产“稳”担当：Apache DolphinScheduler Worker 服务源码全方位解析

摘要：本文是 Apache DolphinScheduler 3.1.9 版本源码解读的第二篇：Worker Server 启动流程源码解读以及相关流程设计。结尾处附有相关流程图，供大家参考。阅读全文

posted @ 2025-09-25 10:27 海豚调度阅读(95) 评论(0) 推荐(0)

（一）3.1.9 生产“稳”担当：Master 服务启动源码全方位解析

摘要：在现代数据驱动的企业中，工作流调度系统是数据管道（Data Pipeline）的“中枢神经”。从 ETL 任务到机器学习训练，从报表生成到实时监控，几乎所有关键业务都依赖于一个稳定、高效、易扩展的调度引擎。阅读全文

posted @ 2025-09-24 10:09 海豚调度阅读(193) 评论(0) 推荐(0)

白鲸开源“创客北京2025”再摘殊荣，聚焦Agentic AI时代数据基础设施建设

摘要：近日，“创客北京2025”创新创业大赛海淀区级赛圆满落幕，经过最终比拼，北京白鲸开源科技有限公司凭借「Agentic AI时代下的数据基础设施平台」（白鲸数据集成调度平台/WhaleStudio）脱颖而出，荣获企业组二等奖。阅读全文

posted @ 2025-09-18 17:31 海豚调度阅读(57) 评论(0) 推荐(0)

Ubuntu 22 下 DolphinScheduler 3.x 伪集群部署实录

摘要：本文记录了在 Ubuntu 22.04 上部署 Apache DolphinScheduler（伪集群模式）的完整过程，涵盖环境准备、安装配置、数据库初始化、用户创建及服务启动等步骤。适合个人学习、功能验证或测试使用。阅读全文

posted @ 2025-09-18 17:19 海豚调度阅读(378) 评论(0) 推荐(0)

教你数分钟内创建并运行一个 DolphinScheduler Workflow！

摘要：本文就主要探讨如何在 ApacheDolphinScheduler 上更好地玩转 Workflow，以帮助大家更好地管理数据处理任务。阅读全文

posted @ 2025-09-18 16:49 海豚调度阅读(325) 评论(0) 推荐(0)

（二）一文读懂数仓设计的核心规范：从层次、类型到生命周期

摘要：《新兴数据湖仓设计与实践手册·数据湖仓建模及模型命名规范（2025年）》由四篇递进式指南组成，以“模型架构—公共规范—分层规范—命名规范”为主线，系统构建可演进、可治理、可共享的现代数据湖仓。首篇《数据模型架构原则》提出了 “ODS-DW-APP” 四层（含DW内DWD/DWM/DWS）数据阅读全文

posted @ 2025-09-10 14:44 海豚调度阅读(353) 评论(0) 推荐(0)

码住！DolphinScheduler 常见故障 “急救指南”，一文解决服务、调度、连接等难题

摘要：本文将从架构层面深入分析常见故障类型，提供详细的排查思路和解决方案，帮助运维人员和开发者快速定位并解决问题。阅读全文

posted @ 2025-09-10 14:34 海豚调度阅读(683) 评论(0) 推荐(0)

公告