4.MR(1)

2.mapreduce工作流程

流程一

流程二

3.shuffle

3.1.shuffle机制

map方法之后,reduce方法之前的数据处理过程称之为shuffle

3.2.分区

3.3.writablecomparable排序

(1)排序概述

(2)排序分类

3.4.combiner合并

posted @ 2024-09-12 09:21  dededea  阅读(4)  评论(0编辑  收藏  举报