2016年8月18日
MapReduce--shuffle
摘要： 一、Shuffle简介 Shuffle的正常意思是洗牌或弄乱，shuffle的大致范围就是把map task的输出结果有效的传送到Reduce端。也可以这样理解，shuffle描述着数据从map task 输出到reduce task输入的这段过程。 在hadoop这样的集群环境中，大部分map t 阅读全文
posted @ 2016-08-18 21:42 IT-驿站 阅读(275) 评论(0) 推荐(0) 编辑