摘要: 转 http://blog.csdn.net/samhacker/article/details/23089157?utm_source=tuicool&utm_medium=referral 一个常被问到的一个问题是: 如果一个HDFS上的文件大小(file size) 小于块大小(block s 阅读全文
posted @ 2016-08-11 11:08 Eamon13 阅读(3319) 评论(0) 推荐(0) 编辑
摘要: mapper数量 reduce数量 combiner 中间值压缩 自定义序列 调整shuffle,减少溢出写 关闭推测执行 任务JVM重用 慢启动reduce 阅读全文
posted @ 2016-08-11 08:34 Eamon13 阅读(198) 评论(0) 推荐(0) 编辑