2018年10月18日
Hadoop Mapreduce的shuffle过程详解
摘要： 1、map task读取数据时默认调用TextInputFormat的成员RecoreReader，RecoreReader调用自己的read()方法，进行逐行读取，返回一个key、value; 2、返回的key、value交给自定义的map方法，输出的context.write(key,value 阅读全文
posted @ 2018-10-18 18:33 超凡- 阅读(270) 评论(0) 推荐(0) 编辑