摘要: 在Yarn中,JobTracker被分为两部分:ResourceManager(RM)和ApplicationMaster(AM)。 MRv1主要由三部分组成:编程模型(API)、数据处理引擎(MapTask和ReduceTask)和运行环境(JobTracker和TaskTracker);Yarn 阅读全文
posted @ 2017-11-22 18:14 麻雀虽小五脏俱全 阅读(1557) 评论(0) 推荐(0) 编辑
摘要: Yarn的基本架构 Yarn是Hadoop2.0中的资源管理系统,它的基本设计思想是将MRv1中的JobTracker拆分成两个独立的服务:一个全局的资源管理器ResourceManager和每个应用程序特有的ApplicatioinMaster。其中ResourceManager负责整个系统的资源 阅读全文
posted @ 2017-11-22 16:15 麻雀虽小五脏俱全 阅读(289) 评论(0) 推荐(0) 编辑