Fork me on GitHub

随笔分类 -  大数据技术栈 / Oozie& Azkaban

摘要:简介 Linux中,周期执行的任务一般由cron这个守护进程来处理 ps -ef | grep cron cron读取一个或多个配置文件,这些配置文件中包含了命令行及其调用时间。 cron的配置文件称为“crontab”,是“cron table”的简写。 1、/var/spool/cron/ 这个 阅读全文
posted @ 2020-01-02 11:16 kris12 阅读(360) 评论(0) 推荐(0) 编辑
摘要:1. Azkaban安装部署 https://azkaban.github.io/azkaban/docs/2.5/ 安装Azkaban 1) 在/opt/module/目录下创建azkaban目录 [kris@hadoop101 module]$ mkdir azkaban 2) 解压azkaba 阅读全文
posted @ 2019-03-05 08:30 kris12 阅读(434) 评论(0) 推荐(0) 编辑
摘要:Oozie的功能模块 workflow 由多个工作单元组成 工作单元之间有依赖关系 MR1->MR2->MR3->result hadoop jar:提交1个MR oozie:监控当前工作单元状态,完成之后自动提交下一个工作单元scheduler crontab:是linux简单调度脚本 定时调度工 阅读全文
posted @ 2019-03-03 15:15 kris12 阅读(1028) 评论(0) 推荐(0) 编辑

levels of contents