随笔分类 -  【吗喽的搬砖日常】 / Azkaban

Azkaban是个简单的批处理调度器，用来构建和运行Hadoop作业或其他脱机过程。
Azkaban - [01] 概述
摘要：Azkaban - [01] 概述简单的任务调度使用crontab、复杂的任务调度使用oozie、azkaban等开发调度系统。 一、为什么学习Azkaban 一个完整的数据分析系统通常都是由大量任务单元（shell脚本、java程序、MapReduce程序、Hive脚本等）组成。各任务单元之间存在先后及前后依赖关系，为了组织起这样 阅读全文
posted @ 2024-04-17 16:09 HOUHUILIN 阅读(29) 评论(0) 推荐(0) 编辑
Azkaban的job从创建到执行
摘要：单一 job Step1： 创建 job 描述文件 xxx.job： job 的描述文件 type = command command = echo 'hello, this is my first azkaban job' Step2：将 job 描述文件打成 zip 文件 zip xxx.zip 阅读全文
posted @ 2020-12-22 10:54 HOUHUILIN 阅读(352) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示