hadoop 之 MapReduce

原理:

  一个大任务分成多个小的子任务(map), 并执行后, 合并结果(reduce)

基本概念: 

  Job & Task  ----- 一个job 分为多个task (分为MapTask 和 ReduceTask)

  JobTracker  ----- 作业调度 | 分配任务, 监控任务执行进度 | 监控TaskTracker 的状态

  TaskTracker----- 执行任务, 汇报状态

执行过程:

  

posted @ 2015-06-21 12:55  hewep  阅读(82)  评论(0编辑  收藏  举报