2017年9月17日
Hadoop 之 shuffle
摘要： Shuffle过程是MapReduce的核心，描述着数据从map task输出到reduce task输入的这段过程。 Hadoop的集群环境，大部分的map task和reduce task是执行在不同的节点上的，那么reduce就要取map的输出结果。那么集群中运行多个Job时，task的正常执 阅读全文
posted @ 2017-09-17 22:28 不系之舟coder 阅读(3406) 评论(0) 推荐(0) 编辑