2015年6月16日
Hadoop MR Job 关于如何控制Map Task 数量
摘要： 整理下，基本分两个方式： 一、对于大量大文件（大于block块设置的大小） 增大minSize，即增大mapred.min.split.size的值，原因：splitsize=max(minisize,min(maxsize,blocksize))，blocksize一般不会做修改. ... 阅读全文
posted @ 2015-06-16 16:43 梅里之巅 阅读(964) 评论(0) 推荐(0) 编辑