2017年10月31日
【Hadoop】完全分布式下Resourcemanager二次分发及Job提交到集群后状态的变化
摘要： 用于查看Hadoop中完全分布式下Resourcemanager二次分发以及作业提交到集群后状态的变化。 IDE：eclipse 调试IDE所在操作系统：win10 Hadoop集群操作系统：Ubuntu16.04 Hadoop集群环境：完全分布式模式，版本为2.7.3 1. 两个概念 IPC : 阅读全文
posted @ 2017-10-31 19:59 sqdmydxf 阅读(624) 评论(0) 推荐(0) 编辑
【Hadoop】完全分布式集群下客户端提交作业分析
摘要： 用于查看Hadoop中完全分布式下MapReduce中作业提交过程。 以下流程是根据Hadoop权威指南上的实现获取ncdc每年最高气温的代码进行调试，在Hadoop完全分布式模式中查看作业提交过程。 操作系统：Ubuntu16.04 IDE：eclipse Hadoop集群环境：完全分布式模式，版 阅读全文
posted @ 2017-10-31 19:40 sqdmydxf 阅读(1065) 评论(1) 推荐(1) 编辑
【Hadoop】本地模式MR过程分析
摘要： 用于查看Hadoop中MapReduce的运行流程。 以下流程是根据Hadoop权威指南上的实现获取ncdc每年最高气温的代码进行调试，在Hadoop本地模式中查看其运行流程。 操作系统：Ubuntu16.04 IDE：eclipse Hadoop集群环境：本地模式，版本为2.7.3 一开始是通过i 阅读全文
posted @ 2017-10-31 16:36 sqdmydxf 阅读(1379) 评论(0) 推荐(0) 编辑