摘要: This is a guide to migrating from Apache MapReduce 1 (MRv1) to the Next Generation MapReduce (MRv2 or YARN). See the following sections for more infor 阅读全文
posted @ 2016-03-12 10:03 gongxiucheng 阅读(546) 评论(0) 推荐(1) 编辑
摘要: 理想情况下,我们应用对Yarn资源的请求应该立刻得到满足,但现实情况资源往往是有限的,特别是在一个很繁忙的集群,一个应用资源的请求经常需要等待一段时间才能的到相应的资源。在Yarn中,负责给应用分配资源的就是Scheduler。其实调度本身就是一个难题,很难找到一个完美的策略可以解决所有的应用场景。 阅读全文
posted @ 2016-03-12 09:53 gongxiucheng 阅读(7211) 评论(1) 推荐(2) 编辑