2019年8月24日
HBase架构及读写流程
摘要： HBase架构： Client 访问HBase的接口并维护cache来加快对HBase的访问 Zookeeper ​ 1、保证任何时候，集群中只有一个活跃master ​ 2、存储所有region的寻址入口 ​ 3、实时监控region server的上线和下线信息，并实时通知master ​ 4、 阅读全文
posted @ 2019-08-24 18:10 HappyCode002 阅读(840) 评论(0) 推荐(0) 编辑
HDFS存储流程及HA
摘要： HDFS架构 主从(Master/Slaves)架构 由一个NameNode和一些DataNode组成 NameNode负责存储和管理文件元数据，并维护了一个层次型的文件目录树 DataNode负责存储文件数据(block块)，并提供block的读写 DataNode与NameNode维持心跳，并汇 阅读全文
posted @ 2019-08-24 18:09 HappyCode002 阅读(638) 评论(0) 推荐(0) 编辑
Hadoop YARN与MapReduce
摘要： YARN架构 ResourceManager 负责整体资源的管理 (Scheduler and ApplicationsManager)NodeManager 向ResourceManager通过心跳汇报自己的资源情况container容器 资源申请的基本单位（包含指定cpu, memory, di 阅读全文
posted @ 2019-08-24 18:09 HappyCode002 阅读(395) 评论(0) 推荐(0) 编辑