摘要: 在数字化转型不断加速的今天,数据已成为企业最宝贵的资产,而如何高效地处理、传输和协调这些海量数据成为企业制胜的关键。大数据调度与同步正是支撑这一核心业务的两大技术支柱。本文将详细阐述大数据调度与同步的工作原理、二者之间的紧密关系以及它们对现代企业的重要性,并重点介绍商业化产品 WhaleStudio 阅读全文
posted @ 2025-02-12 14:50 海豚调度 阅读(14) 评论(0) 推荐(0) 编辑
摘要: Ambari是一个用于管理Hadoop集群的工具,虽然Ambari本身并不直接支持DolphinScheduler的安装,但我们可以通过自定义服务的方式将其集成到Ambari中。本文将描述如何使用Ambari安装DolphinScheduler。 1.将需要集成到Ambari的服务安装包放到该目录下 阅读全文
posted @ 2025-02-10 15:00 海豚调度 阅读(10) 评论(0) 推荐(0) 编辑
摘要: 春节期间,IT圈内两件大事持续发酵,一件是中国大模型DeepSeek R1的开源震动全球AI界,让中国科技界扬眉吐气,廉价大模型走入千家万户;另一件是SAP被客户居然之家告上法庭,要求索赔590万开发费用和1700万软件费用,最终法院判SAP退还350万研发费用。这两件事的背后,实际上映射了一个势不 阅读全文
posted @ 2025-02-07 18:14 海豚调度 阅读(31) 评论(0) 推荐(0) 编辑
摘要: Apache DolphinScheduler 非常适用于实时数据处理场景,尤其是与 Apache Flink 的集成。DolphinScheduler 提供了丰富的功能,包括任务依赖管理、动态调度、实时监控和日志管理,能够有效简化 Flink 实时任务的管理和部署。通过 DolphinSchedu 阅读全文
posted @ 2025-02-07 11:35 海豚调度 阅读(23) 评论(0) 推荐(0) 编辑
摘要: 各位热爱DolphinScheduler的小伙伴们,新年新气象,今年1月份的社区月报如期而至,请查收! 这里将更新DolphinScheduler项目和社区每月的重大进展,敬请关注。 DolphinScheduler月度Merge Stars 感谢以下小伙伴上个月为 Apache DolphinSc 阅读全文
posted @ 2025-02-06 15:53 海豚调度 阅读(26) 评论(0) 推荐(0) 编辑
摘要: 转载自风_间 上一篇写了《DolphinScheduler接口实操(一):利用接口实现高效批量工作流导入及脚本上线》,通过DolphinScheduler的一些接口来实现导入-上线工作流,那么DolphinScheduler的接口应该怎么找呢?在此简单总结一篇。 接下来以手动执行一次工作流为例。 寻 阅读全文
posted @ 2025-01-23 10:42 海豚调度 阅读(31) 评论(0) 推荐(0) 编辑
摘要: 导读 某地方性股份制商业银行主要提供个人金融、公司金融、国际金融等方面的业务,承担着大量的金融数据处理与分析任务。这些任务对于确保银行的运营效率、风险管理和客户服务至关重要。过去,该银行一直依赖自建的调度系统来管理和协调这些数据任务,确保数据的准确性和及时性。然而,随着业务的不断扩展和数据量的急剧增 阅读全文
posted @ 2025-01-22 16:06 海豚调度 阅读(29) 评论(0) 推荐(0) 编辑
摘要: 实现了批量生成DolphinScheduler的任务,当导入时发现只能逐个导入,因此通过接口实现会更方便。 DolphinScheduler接口文档 DolphinScheduler是有接口文档的,地址是 http://IP:12345/dolphinscheduler/swagger-ui/ind 阅读全文
posted @ 2025-01-22 14:22 海豚调度 阅读(33) 评论(0) 推荐(0) 编辑
摘要: 谁都不会想到,美国即将对Tiktok发出的禁令会让故事发生这样的转向,小红书竟成最后“赢家”。 小红书首页的“国际范” 一夜之间,小红书的首页被大量英文帖子“攻占”。中国网友纷纷表示:“一觉醒来,我成外国人了?”。这些新用户自称“TikTok难民”,并迅速在小红书上开设账号,上传内容,分享生活点滴、 阅读全文
posted @ 2025-01-16 14:39 海豚调度 阅读(76) 评论(0) 推荐(0) 编辑
摘要: 问题现象 有时候,Apache DolphinScheduler项目管理页面会发生加载不出来的问题,浏览器查看为[http://ip:12345/dolphinscheduler/projects?pageSize=10&pageNo=1&searchVal=]请求超时。 解决思路 查看海豚运行日志 阅读全文
posted @ 2025-01-15 14:22 海豚调度 阅读(41) 评论(0) 推荐(0) 编辑
点击右上角即可分享
微信分享提示