会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
47759476
Once you get through that terrifying factual and accepting that,then every place is the center of the universe,and every moment is the most important moment and everything is the meaning of life
博客园
首页
新随笔
联系
订阅
管理
mapreduce-碎碎念:
master和worker并不知道他们执行了什么,他们只是在执行
用户并不知道分布式具体是怎么实现的,对他而言写好map、reduce即可
mapreduce是不与具体任务耦合的
map、reduce就只是一个函数,他们有他们自己的返回值,仅此而已
shuffles
GFS和Mapreduce混用减少了网络流量,尽量在同一台机器上使用、存储数据
GFS的特性使得输出的结果需要备份,这也是一大笔流量
posted @
2021-05-08 20:23
TR_Goldfish
阅读(
34
) 评论(
0
)
编辑
收藏
举报
会员力量,点亮园子希望
刷新页面
返回顶部
公告