摘要:
HDFS HA 集群搭建: DN(DataNode):3个;NN(NameNode):2;ZK(ZooKeeper):3(大于1的奇数个);ZKFC:和NN在同一台机器;JN:3;RM(ResourceManager):1;DM(DataManager):3个;与DN在同一台,就近原则 √表示在该机 阅读全文
摘要:
Hadoop 2.0 产生背景 客户端发送读写请求先要经过NameNode,NameNode的元数据会不断增大,需要将元数据分开存放(内存) MapReduce为离线计算框架,Storm为流式计算框架,Spark为内存计算框架 NNFederation : 将元数据分为两个独立的进行运行,两个互不影 阅读全文