2014年10月23日
项目中Map端数据处理不均匀性分析
摘要： Map任务的不均匀性 最近发现Map端数据越来越不均匀，而处理输入的数据，写到本地磁盘的数据量都差不多，我们随便拿出来两个attempt任务（当前map数量为64个），33和45，33的counter： 下面是000045的Counter数据 可以看出Counter中的数据也是差不多，但... 阅读全文
posted @ 2014-10-23 22:41 clamaa 阅读(336) 评论(0) 推荐(0) 编辑