07 2024 档案
摘要：Apache DolphinScheduler 社区 8 月用户交流会精彩继续！本次活动邀请到老牌农牧产品实业集团铁骑力士架构工程师，来分享Apache DolphinScheduler在现代农牧食品加工场景中的应用实践。此外，还将有社区活跃贡献者以Apache DolphinScheduler为例
阅读全文
摘要：转载自程序员小陶 Apache DolphinScheduler 在使用过程中，肯定会有任务出现失败的情况，那么问题来了：调度任务的告警是需要人为配置的，在生产环境中，面对海量的任务，如何找到重要的任务，并且在失败的时候，第一时间告警呢？ 先思考一下。 先看思路 本文提供一个思路，接着往下看吧。 不
阅读全文
摘要：引言 在DataOps（数据运营）的推动下，越来越多的企业开始关注数据研发和运营的一体化建设。DataOps通过自动化和流程优化，帮助企业实现数据的高效流转和管理。 当前，Apache DolphinScheduler作为一款开源的分布式调度系统，凭借其灵活的插件机制和强大的调度能力，已经成为许多企
阅读全文
摘要：Apache DolphinScheduler 3.2.2 版本正式发布！ 近日，Apache DolphinScheduler 发布了 3.2.2 版本。此版本主要基于 3.2.1 版本进行了 bug 修复，新增若干特性，并进行了众多改进和 Bug 修复，以及文档修复等。 📥3.2.2版本下载：
阅读全文
摘要：引言 随着云计算技术的发展，Amazon Web Services (AWS) 作为一个开放的平台，一直在帮助开发者更好的在云上构建和使用开源软件，同时也与开源社区紧密合作，推动开源项目的发展。 本文主要探讨2024年值得关注的一些开源软件及其在AWS上的应用情况，希望能够给大家参考使用！ 2024
阅读全文
摘要：引言 随着云计算技术的发展，Amazon Web Services (AWS) 作为一个开放的平台，一直在帮助开发者更好的在云上构建和使用开源软件，同时也与开源社区紧密合作，推动开源项目的发展。 本文主要探讨2024年值得关注的一些开源软件及其在AWS上的应用情况，希望能够给大家参考使用！ 2024
阅读全文
摘要：社区迎来新committer！这次是来自小鹏汽车的Gallardot，看看他与Apache DolphinScheduler社区的故事吧。 对话社区 Q1：您为Apache DolphinScheduler社区提交过哪些贡献（包括代码和非代码）？请具体描述您的贡献。 A: 我主要专注于提升Apach
阅读全文
摘要：亚信科技在Apache SeaTunnel的实践分享 自我介绍 各位同学好，很荣幸通过Apache SeaTunnel社区和大家进行分享交流。我是来自亚信科技的潘志宏，主要负责公司内部数据中台产品的开发。 本次分享的主题是Apache SeaTunnel在亚信科技的集成实践，具体讲我们的数据中台是如
阅读全文
摘要：随着Apache DolphinScheduler在全球范围内的快速发展，我们的用户群体和社区活动也在不断扩大。 为了进一步丰富我们的社区内容，分享更多有价值的知识和经验，我们诚挚地邀请您加入我们，成为Apache DolphinScheduler社区的分享嘉宾。 Meetup是什么？ Apache
阅读全文
摘要：在上篇文章《2.6倍！WhaleTunnel客户POC实景对弈DataX》发布之后，一个客户突然向我们控诉其苦DataX久矣，因为是在信创的鲲鹏ARM CPU上运行 ，每天同步需要很长时间，问我们可以不可以帮忙解决。 提起信创ARM CPU，大数据同仁们是又爱又恨，爱是因为价格真的便宜，恨是因为做大
阅读全文
摘要：在会上，白鲸开源CEO 郭炜于「开放原子开源数据库生态论坛」上发分享了题为 《大模型时代下DataOps驱动企业数智化升级》 的演讲，并在「开源与闭源，在行业应用中的发展潜能」的圆桌对话中分享了自己的开源心得体会与经验。
阅读全文
摘要：在AI驱动的商业世界中，DataOps作为连接数据与洞察的桥梁，正迅速成为企业数据战略的核心。
在WOT全球技术创新大会2024·北京站，白鲸开源联合创始人&CTO 代立冬 在「大数据技术与基础设施」专场深入分析DataOps的核心理念、AI大模型开发流程，并通过白鲸开源科技的实践案例，展望了DataOps的未来。
阅读全文
摘要：Apache DolphinScheduler 是一个分布式、去中心化的大数据工作流调度系统，支持大数据任务调度。若要设置 DolphinScheduler 开机自启动，通常需要将其配置为系统服务。以下是一般步骤，具体操作可能因操作系统的不同而有所差异。
阅读全文
摘要：各位热爱Apache DolphinScheduler的小伙伴们，社区6月月报更新啦！这里将记录Apache DolphinScheduler社区每月的重要更新，欢迎关注。 月度Merge Stars 感谢以下小伙伴上个月为Apache DolphinScheduler所做的精彩贡献（排名不分先后）
阅读全文
摘要：引言 这篇文章将给大家讲解关于DolphinScheduler与AWS的EMR和Redshift的集成实践，通过本文希望大家能更深入地了解AWS智能湖仓架构，以及DolphinScheduler在实际应用中的重要性。 AWS智能湖仓架构 首先，我们来看一下AWS经典的智能湖仓架构图。 这张图展示了以
阅读全文
摘要：💡 本系列文章是 DolphinScheduler 由浅入深的教程，涵盖搭建、二开迭代、核心原理解读、运维和管理等一系列内容。适用于想对 DolphinScheduler了解或想要加深理解的读者。 祝开卷有益:) 用过 DolphinScheduler 的小伙伴应该都知道，DolphinSched
阅读全文
摘要：PROFILE 姓名：程鑫 公司：阿里云 职位：开发工程师 Github ID: rickchengx 从事领域：大数据调度系统开发 兴趣爱好：健身 推举理由 他于2022年8月2日开始了他的DolphinScheduler之旅，在社区工作了将近两年，并于2023年5月12日成为Committer。
阅读全文