2014年6月27日
MapReduce中TextInputFormat分片和读取分片数据源码级分析
摘要： InputFormat主要用于描述输入数据的格式(我们只分析新API，即org.apache.hadoop.mapreduce.lib.input.InputFormat)，提供以下两个功能： (1)数据切分：按照某个策略将输入数据切分成若干个split，以便确定MapTask个数以及对应的s... 阅读全文
posted @ 2014-06-27 18:27 玖疯 阅读(4943) 评论(1) 推荐(1) 编辑