随笔分类 -  MapReduce

【转】reduce端缓存数据过多出现FGC，导致reduce生成的数据无法写到hdfs
摘要：转自 http://blog.csdn.net/bigdatahappy/article/details/41726389转这个目的，是因为该贴子中调优思路不错，值得学习 搜索推荐有一个job，1000多个map，200个reduce，运行到最后只剩一个reduce（10.39.6.130上）的时... 阅读全文
posted @ 2014-12-31 18:25 HarkLee 阅读(3321) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示