海豚调度 - 博客园

2024年8月

Apache DolphinScheduler 1.3.4升级至3.1.2版本过程中的踩坑记录

摘要：因为在工作中需要推动Apache DolphinScheduler的升级，经过预研，从1.3.4到3.1.2有的体验了很大的提升，在性能和功能性有了很多的改善，推荐升级。查看官方的升级文档，可知有提供升级脚本，如果只是跨小版本的更新那么只用执行脚本就好了，但跨多个大版本升级时依然容易出现各种问题，阅读全文

posted @ 2024-08-02 10:33 海豚调度阅读(10) 评论(0) 推荐(0) 编辑

想不到WhaleStudio和Talend的差异竟如此之大！

摘要：最近我们遇到很多客户需求是把Talend迁移到WhaleStudio，主要是发现WhaleStudio支持的数据源多很多，从各个版本的SAP到AWS Redshift，S3，从MangoDB CDC到 Neo4J甚至各种国产信创数据源，可谓应有尽有。同时，客户发现WhaleStudio同步效率比Ta 阅读全文

posted @ 2024-08-01 11:54 海豚调度阅读(15) 评论(0) 推荐(0) 编辑

2024年7月

Apache DolphinScheduler用户线上Meetup火热来袭！

摘要： Apache DolphinScheduler 社区 8 月用户交流会精彩继续！本次活动邀请到老牌农牧产品实业集团铁骑力士架构工程师，来分享Apache DolphinScheduler在现代农牧食品加工场景中的应用实践。此外，还将有社区活跃贡献者以Apache DolphinScheduler为例阅读全文

posted @ 2024-07-30 17:02 海豚调度阅读(9) 评论(0) 推荐(0) 编辑

Apache DolphinScheduler使用图关系解决核心链路告警问题，减轻任务运维负担！

摘要：转载自程序员小陶 Apache DolphinScheduler 在使用过程中，肯定会有任务出现失败的情况，那么问题来了：调度任务的告警是需要人为配置的，在生产环境中，面对海量的任务，如何找到重要的任务，并且在失败的时候，第一时间告警呢？先思考一下。先看思路本文提供一个思路，接着往下看吧。不阅读全文

posted @ 2024-07-30 14:39 海豚调度阅读(12) 评论(0) 推荐(0) 编辑

DataOps 新趋势：联通数科如何利用 DolphinScheduler 实现数据一体化管理

摘要：引言在DataOps（数据运营）的推动下，越来越多的企业开始关注数据研发和运营的一体化建设。DataOps通过自动化和流程优化，帮助企业实现数据的高效流转和管理。当前，Apache DolphinScheduler作为一款开源的分布式调度系统，凭借其灵活的插件机制和强大的调度能力，已经成为许多企阅读全文

posted @ 2024-07-25 19:00 海豚调度阅读(20) 评论(0) 推荐(0) 编辑

Apache DolphinScheduler 3.2.2 版本正式发布！

摘要： Apache DolphinScheduler 3.2.2 版本正式发布！近日，Apache DolphinScheduler 发布了 3.2.2 版本。此版本主要基于 3.2.1 版本进行了 bug 修复，新增若干特性，并进行了众多改进和 Bug 修复，以及文档修复等。 📥3.2.2版本下载：阅读全文

posted @ 2024-07-23 15:24 海豚调度阅读(41) 评论(0) 推荐(0) 编辑

如何在AWS上构建Apache DolphinScheduler

摘要：引言随着云计算技术的发展，Amazon Web Services (AWS) 作为一个开放的平台，一直在帮助开发者更好的在云上构建和使用开源软件，同时也与开源社区紧密合作，推动开源项目的发展。本文主要探讨2024年值得关注的一些开源软件及其在AWS上的应用情况，希望能够给大家参考使用！ 2024 阅读全文

posted @ 2024-07-19 16:22 海豚调度阅读(17) 评论(0) 推荐(0) 编辑

如何在AWS上构建Apache DolphinScheduler

posted @ 2024-07-18 17:01 海豚调度阅读(14) 评论(0) 推荐(0) 编辑

祝贺小鹏汽车Gallardot同学成为Apache DolphinScheduler Committer!

摘要：社区迎来新committer！这次是来自小鹏汽车的Gallardot，看看他与Apache DolphinScheduler社区的故事吧。对话社区 Q1：您为Apache DolphinScheduler社区提交过哪些贡献（包括代码和非代码）？请具体描述您的贡献。 A: 我主要专注于提升Apach 阅读全文

posted @ 2024-07-16 14:17 海豚调度阅读(14) 评论(0) 推荐(0) 编辑

亚信科技基于 Apache SeaTunnel 的二次开发应用实践

摘要：亚信科技在Apache SeaTunnel的实践分享自我介绍各位同学好，很荣幸通过Apache SeaTunnel社区和大家进行分享交流。我是来自亚信科技的潘志宏，主要负责公司内部数据中台产品的开发。本次分享的主题是Apache SeaTunnel在亚信科技的集成实践，具体讲我们的数据中台是如阅读全文

posted @ 2024-07-11 20:02 海豚调度阅读(71) 评论(0) 推荐(0) 编辑

公告