江山疯宇晴

2013年5月9日

HadoopSourceAnalyse --- Mapreduce Job init&submit

摘要: OverviewHadoop 的任务是通过Job对像提交到系统处理的,所以Job对像带有一切运行任务所需要的信息。下图展示了,Job运行过程所经历的所有阶段:图 1-1在配置 完Job对像之后,Job会首初始化一个Cluster对像,用来保存Cluster相关的信息,包括用来与ResourceManager通信的客户端:图 1-2Cluster对像初始化的时候,会先去寻找 ClientProvider实现,配置在文件:META-INF/services/org.apache.hadoop.mapreduce.protocol.ClientProtocolProvider中, 默认为:YarnC 阅读全文

posted @ 2013-05-09 16:19 江山疯宇晴 阅读(438) 评论(0) 推荐(0) 编辑

导航