2020年11月21日
MapReduce shuffle原理
摘要： 一、Shuffle过程介绍 Shuffle的意思就是是洗牌。在MapReduce中，从Map Task任务中输出中间数据开始，到Reduce Task任务开始执行reduce()方法结束，这一中间处理过程就被称为MapReduce的Shuffle。 Shuffle过程分为两个阶段：Map端的shuf 阅读全文
posted @ 2020-11-21 11:25 随时随地的 阅读(404) 评论(0) 推荐(0) 编辑