会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
ArancioneRagazza
2017年5月31日
<YARN><MRv2><Spark on YARN>
摘要: MRv1 VS MRv2 MRv1: - JobTracker: 资源管理 & 作业控制- 每个作业由一个JobInProgress控制,每个任务由一个TaskInProgress控制。由于每个任务可能有多个运行实例,因此,TaskInProgress实际管理了多个运行实例TaskAttempt,每
阅读全文
posted @ 2017-05-31 17:18 橘子不是唯一的水果
阅读(275)
评论(0)
推荐(0)
编辑
<容错性FaultTolerance><Hadoop><Spark>
摘要: Overview 讨论一些常见大数据框架的容错机制 Fault Tolerance in Hadoop MapReduce Heartbeat心跳机制:如果在一定时间内没有收到心跳,则reschedule all pending and in progress tasks to another Ta
阅读全文
posted @ 2017-05-31 16:11 橘子不是唯一的水果
阅读(796)
评论(0)
推荐(0)
编辑
公告
导航
博客园
首页
新随笔
新文章
联系
订阅
管理