2022年3月8日
Hadoop之Shuffle机制详解
摘要： 1. 什么是Shuffle机制？ 在Hadoop中数据从Map阶段传递给Reduce阶段的过程就叫Shuffle，Shuffle机制是整个MapReduce框架中最核心的部分。 Shuffle翻译成中文的意思为：洗牌、发牌（核心机制：数据分区、排序、缓存) 2. Shuffle的作用范围 一般把数据 阅读全文
posted @ 2022-03-08 15:57 jsqup 阅读(391) 评论(0) 推荐(0) 编辑