2017年5月31日

摘要: MRv1 VS MRv2 MRv1: - JobTracker: 资源管理 & 作业控制- 每个作业由一个JobInProgress控制,每个任务由一个TaskInProgress控制。由于每个任务可能有多个运行实例,因此,TaskInProgress实际管理了多个运行实例TaskAttempt,每 阅读全文
posted @ 2017-05-31 17:18 橘子不是唯一的水果 阅读(275) 评论(0) 推荐(0) 编辑
 
摘要: Overview 讨论一些常见大数据框架的容错机制 Fault Tolerance in Hadoop MapReduce Heartbeat心跳机制:如果在一定时间内没有收到心跳,则reschedule all pending and in progress tasks to another Ta 阅读全文
posted @ 2017-05-31 16:11 橘子不是唯一的水果 阅读(796) 评论(0) 推荐(0) 编辑