2017年3月16日
MapReduce Map数 reduce数设置
摘要： JobConf.setNumMapTasks(n)是有意义的，结合block size会具体影响到map任务的个数，详见FileInputFormat.getSplits源码。假设没有设置mapred.min.split.size，缺省为1的情况下，针对每个文件会按照min (totalsize[所 阅读全文
posted @ 2017-03-16 21:46 黎明＆岁月 阅读(3458) 评论(0) 推荐(0) 编辑