笔记：Hadoop权威指南 第6章 MapReduce 的工作机制

一、Job执行流程

二、状态传递流程

三、任务失败

可以设置 Mapper、Reducer 失败重试次数

TaskTracker 失败可能被列入黑名单

 

JobTracker  的HA 通过ZooKeeper实现

四、Job 调度

Job 的优先级：VERY_HIGH，HIGH，NORMAL，LOW，VERY_LOW

JOB默认调度器：基于队列的FIFO调度器

公平调度器 Fair Scheduler：

Capacity 调度器：

五、Shuffle 和排序

六、任务的执行