会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
ls_ls
博客园
首页
新随笔
联系
管理
订阅
2018年1月27日
MapReduce工作机制
摘要: MapReduce的思想就是“分而治之”。 1)Mapper负责“分” 把复杂的任务分解为若干个“简单的任务”来处理。“简单的任务”包含三层含义: 数据或计算的规模相对原任务要大大缩小 就近计算原则,任务会分配到存放着所需数据的节点上进行计算 这些小任务可以并行计算彼此间几乎没有依赖关系 2)Red
阅读全文
posted @ 2018-01-27 19:06 NightRaven
阅读(435)
评论(0)
推荐(0)
编辑
公告