Hadoop:The Definitive Guid 总结 Chapter 6 MapReduce的工作原理
摘要:
1.剖析MapReduce作业运行机制1).经典MapReduce--MapReduce1.0整个过程有有4个独立的实体客户端:提交MapReduceJobTracker:协调作业的运行TaskTracker:运行作业划分后的任务HDFS:用来在其他实体之间共享作业文件以下为运行整体图A.作业的提交JobClient的runJob是用于新建JobClient实例并调用其submitJob()方法的便捷方式,提交Job后,runJob()每秒轮询检测作业的进度,随时监控Job的运行状态。其中JobClient的submitJob()方法所实现的作业提交过程:向JobTracker请求一个新的作业 阅读全文
posted @ 2012-08-11 13:08 as_ 阅读(4359) 评论(0) 推荐(0) 编辑