笔记:Hadoop权威指南 第6章 MapReduce 的工作机制
一、Job执行流程
二、状态传递流程
三、任务失败
可以设置 Mapper、Reducer 失败重试次数
TaskTracker 失败可能被列入黑名单
JobTracker 的HA 通过ZooKeeper实现
四、Job 调度
Job 的优先级:VERY_HIGH,HIGH,NORMAL,LOW,VERY_LOW
JOB默认调度器:基于队列的FIFO调度器
公平调度器 Fair Scheduler:
Capacity 调度器:
五、Shuffle 和排序
六、任务的执行