Hadoop 相关问题

1.MR Job 输入非常多,启动map 非常多,如何提高MapTask 启动速度(附加条件:集群很空闲,资源多多):

 参考答案:

       a.重写调度器算法,降低时间复杂度

   b.Out-of-bound heartbeat提高调度的效率

      c.一次心跳分配多个Task

      d.Job History改造成异步写

posted @ 2015-12-25 16:16  梅里之巅  阅读(127)  评论(0编辑  收藏  举报