摘要: Hadoop生态圈-Azkaban实现hive脚本执行 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任。 本篇博客中在HDFS分布式系统取的数据,而这个数据的是有之前我通过MapReduce生产的数据,详情请参考:https://www.cnblogs.com/yinzhengjie 阅读全文
posted @ 2018-06-27 14:36 尹正杰 阅读(3590) 评论(0) 推荐(1) 编辑
摘要: Hadoop生态圈-Azkaban实现文件上传到hdfs并执行MR数据清洗 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任。 如果你没有Hadoop集群的话也没有关系,我这里给出当时我部署Hadoop集群的笔记:https://www.cnblogs.com/yinzhengjie/ 阅读全文
posted @ 2018-06-27 12:55 尹正杰 阅读(615) 评论(0) 推荐(0) 编辑
摘要: Hadoop生态圈-Azkaban实战之Command类型执行指定脚本 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任。 1>.服务端测试代码(别忘记添加权限哟!) 2>.Windows端的job任务 3>.在azkaban的web界面创建项目 4>.将我们压缩好的zip文件上传上去 阅读全文
posted @ 2018-06-27 12:36 尹正杰 阅读(1781) 评论(0) 推荐(1) 编辑