随笔分类 -  hadoop

从groupby 理解mapper-reducer
摘要：注，reduce之前已经shuff。 http://zheming.wang/blog/2015/05/19/3AFF5BE8-593C-4F76-A72A-6A40FB140D4D/ 简单地说，reduce任务在执行之前的工作就是不断地拉取每个map任务的最终结果，然后对从不同地方拉取过来的数据不 阅读全文

posted @ 2019-10-03 13:21 TMatrix52 阅读(253) 评论(0) 推荐(0) 编辑

reducer 按key聚合
摘要： 阅读全文

posted @ 2018-12-04 19:37 TMatrix52 阅读(121) 评论(0) 推荐(0) 编辑

导航

< 2025年3月 >
日 一 二 三 四 五 六
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

统计

点击右上角即可分享
微信分享提示