2015年3月21日
作业流程和优化
摘要： MapReduce作业读取文件Map任务数量由InputSplit决定，InputSplit分片大小默认是HDFS块大小（hadoop1.x=64mb，hadoop2.x是128mb）。例如： MapReduce作业读取HDFS上（hadoop2.x）两个文件，一个是200MB，一个是100MB，... 阅读全文
posted @ 2015-03-21 19:49 孟尧 阅读(305) 评论(0) 推荐(0) 编辑