2023年1月25日
【Hadoop】MapReduce原理剖析（Map，Shuffle，Reduce三阶段）
摘要： 文章目录 1. Map阶段1.1 把输入文件(夹)划分为很多InputSplit(Split)1.2 分配并执行map作业 2. Shuffle阶段2.1 Partition(分区)2.2 Sort(排序)2.3 Group(分组)2.4 Combiner(规约)2.5 序列化并写入Linux磁盘内 阅读全文
posted @ 2023-01-25 17:21 ccql 阅读(225) 评论(0) 推荐(0) 编辑