摘要: 随着Apache DolphinScheduler在全球范围内的快速发展,我们的用户群体和社区活动也在不断扩大。 为了进一步丰富我们的社区内容,分享更多有价值的知识和经验,我们诚挚地邀请您加入我们,成为Apache DolphinScheduler社区的分享嘉宾。 Meetup是什么? Apache 阅读全文
posted @ 2024-07-10 14:21 海豚调度 阅读(5) 评论(0) 推荐(0) 编辑
摘要: 在上篇文章《2.6倍!WhaleTunnel客户POC实景对弈DataX》发布之后,一个客户突然向我们控诉其苦DataX久矣,因为是在信创的鲲鹏ARM CPU上运行 ,每天同步需要很长时间,问我们可以不可以帮忙解决。 提起信创ARM CPU,大数据同仁们是又爱又恨,爱是因为价格真的便宜,恨是因为做大 阅读全文
posted @ 2024-07-10 10:36 海豚调度 阅读(7) 评论(0) 推荐(0) 编辑
摘要: 在会上,白鲸开源CEO 郭炜于「开放原子开源数据库生态论坛」上发分享了题为 《大模型时代下DataOps驱动企业数智化升级》 的演讲,并在「开源与闭源,在行业应用中的发展潜能」的圆桌对话中分享了自己的开源心得体会与经验。 阅读全文
posted @ 2024-07-08 17:47 海豚调度 阅读(5) 评论(0) 推荐(0) 编辑
摘要: 在AI驱动的商业世界中,DataOps作为连接数据与洞察的桥梁,正迅速成为企业数据战略的核心。 在WOT全球技术创新大会2024·北京站,白鲸开源联合创始人&CTO 代立冬 在「大数据技术与基础设施」专场深入分析DataOps的核心理念、AI大模型开发流程,并通过白鲸开源科技的实践案例,展望了DataOps的未来。 阅读全文
posted @ 2024-07-08 17:40 海豚调度 阅读(5) 评论(0) 推荐(0) 编辑
摘要: Apache DolphinScheduler 是一个分布式、去中心化的大数据工作流调度系统,支持大数据任务调度。若要设置 DolphinScheduler 开机自启动,通常需要将其配置为系统服务。以下是一般步骤,具体操作可能因操作系统的不同而有所差异。 阅读全文
posted @ 2024-07-08 17:29 海豚调度 阅读(2) 评论(0) 推荐(0) 编辑
摘要: 各位热爱Apache DolphinScheduler的小伙伴们,社区6月月报更新啦!这里将记录Apache DolphinScheduler社区每月的重要更新,欢迎关注。 月度Merge Stars 感谢以下小伙伴上个月为Apache DolphinScheduler所做的精彩贡献(排名不分先后) 阅读全文
posted @ 2024-07-08 17:26 海豚调度 阅读(14) 评论(0) 推荐(0) 编辑
摘要: 引言 这篇文章将给大家讲解关于DolphinScheduler与AWS的EMR和Redshift的集成实践,通过本文希望大家能更深入地了解AWS智能湖仓架构,以及DolphinScheduler在实际应用中的重要性。 AWS智能湖仓架构 首先,我们来看一下AWS经典的智能湖仓架构图。 这张图展示了以 阅读全文
posted @ 2024-07-05 11:29 海豚调度 阅读(9) 评论(0) 推荐(0) 编辑
摘要: 💡 本系列文章是 DolphinScheduler 由浅入深的教程,涵盖搭建、二开迭代、核心原理解读、运维和管理等一系列内容。适用于想对 DolphinScheduler了解或想要加深理解的读者。 祝开卷有益:) 用过 DolphinScheduler 的小伙伴应该都知道,DolphinSched 阅读全文
posted @ 2024-07-04 15:02 海豚调度 阅读(19) 评论(0) 推荐(0) 编辑
摘要: PROFILE 姓名:程鑫 公司:阿里云 职位:开发工程师 Github ID: rickchengx 从事领域:大数据调度系统开发 兴趣爱好:健身 推举理由 他于2022年8月2日开始了他的DolphinScheduler之旅,在社区工作了将近两年,并于2023年5月12日成为Committer。 阅读全文
posted @ 2024-07-01 14:13 海豚调度 阅读(17) 评论(0) 推荐(0) 编辑
摘要: 官方文档地址:https://dolphinscheduler.apache.org/zh-cn/docs/3.1.9 DolphinScheduler简介 摘自官网:Apache DolphinScheduler 是一个分布式易扩展的可视化DAG工作流任务调度开源系统。适用于企业级场景,提供了一个 阅读全文
posted @ 2024-06-27 16:26 海豚调度 阅读(168) 评论(0) 推荐(0) 编辑