会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
相由心生
If you don't work hard, you'll achieve nothing
博客园
首页
新随笔
联系
订阅
管理
2017年3月16日
MapReduce Map数 reduce数设置
摘要: JobConf.setNumMapTasks(n)是有意义的,结合block size会具体影响到map任务的个数,详见FileInputFormat.getSplits源码。假设没有设置mapred.min.split.size,缺省为1的情况下,针对每个文件会按照min (totalsize[所
阅读全文
posted @ 2017-03-16 21:46 黎明&岁月
阅读(3419)
评论(0)
推荐(0)
编辑
公告