会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
ZFYCH_Love
Simply but Powerful
博客园
::
首页
::
博问
::
闪存
::
新随笔
::
联系
::
订阅
::
管理
::
公告
2016年5月22日
Hadoop学习19--推测式执行
摘要: 所谓推测式执行,就是计算框架判断,如果有一个task执行的过慢,则会启动备份任务,最终使用原任务+备份任务中执行较快task的结果。产生原因一般是程序bug、负载倾斜。 那么这个较慢,是怎么判断的呢? 有如下具体的算法: 比较两个时间。一是根据推测式算法计算出来的task最终完成时刻,也就是按着任务
阅读全文
posted @ 2016-05-22 22:32 xiaoyang_
阅读(1400)
评论(0)
推荐(0)
编辑