摘要: YARN是Hadoop2.0中的资源管理系统,它的设计思想是将MRv1中的JobTracker拆分成两个独立的服务:一个全局的资源管理器ResourceManager和每个应用程序持有的ApplicationMaster。其中RM负责整个系统的资源管理和分配,AM负责单个应用程序的管理。 一、YAR 阅读全文
posted @ 2018-10-22 14:18 firstwin 阅读(672) 评论(0) 推荐(0) 编辑
摘要: HDFS(Hadoop Distributed File System)是Hadoop核心组成之一,是分布式计算中数据存储管理的基础,被设计成适合运行在通用硬件上的分布式文件系统。HDFS架构中有两类节点,一类是NameNode,又叫“元数据节点”,另一类是DataNode,又叫“数据节点”,分别执 阅读全文
posted @ 2018-10-22 11:44 firstwin 阅读(4261) 评论(0) 推荐(0) 编辑