2014年1月23日

【Hadoop代码笔记】Hadoop作业提交之Child启动map任务

摘要: 一、概要描述在上篇博文描述了TaskTracker启动一个独立的java进程来执行Map或Reduce任务。在本篇和下篇博文中我们会关注启动的那个入口是org.apache.hadoop.mapred.Child的这个Java进程是如何执行用户定义的map或Reduce任务的。接上篇文章,TaskRunner线程执行中,会构造一个java –D** Child address port tasked这样第一个java命令,单独启动一个java进程。在Child的main函数中通过TaskUmbilicalProtocol协议,从TaskTracker获得需要执行的Task,并调用Task的ru 阅读全文

posted @ 2014-01-23 12:56 idouba.net 阅读(2164) 评论(0) 推荐(1) 编辑

导航