2014年9月18日
Hadoop Map/Reduce的工作流
摘要： 问题描述我们的数据分析平台是单一的Map/Reduce过程，由于半年来不断地增加需求，导致了问题已经不是那么地简单，特别是在Reduce阶段，一些大对象会常驻内存。因此越来越顶不住压力了，当前内存问题已经是最大的问题，每个Map占用5G，每个Reduce占用9G！直接导致当数据分析平台运行时... 阅读全文
posted @ 2014-09-18 22:07 clamaa 阅读(347) 评论(0) 推荐(0) 编辑