会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
大风吹爱护
博客园
首页
新随笔
联系
订阅
管理
2021年9月21日
大数据
摘要: reducer主要有三个阶段 1.Shuffle(一部分): Reducer通过网络使用HTTP从每个mapper复制排序的输出(K2V2)。 2.Sort: 框架合并按键对reducer输入进行排序(因为不同的mapper可能输出相同的键)。 shuffle和sort阶段是同时发生的,也就是说,在
阅读全文
posted @ 2021-09-21 09:12 大风吹爱护
阅读(71)
评论(0)
推荐(0)
编辑
公告