2018年9月26日

Hadoop之Shuffle机制详解
摘要： 1.什么是Shuffle机制 1.1）在Hadoop中数据从Map阶段传递给Reduce阶段的过程就叫Shuffle，Shuffle机制是整个MapReduce框架中最核心的部分。 1.2）Shuffle翻译成中文的意思为：洗牌、发牌（核心机制：数据分区、排序、缓存) 2.Shuffle的作用范围 阅读全文
posted @ 2018-09-26 11:09 未来不等待 阅读(13042) 评论(0) 推荐(3) 编辑

导航