2016年11月5日

hadoop(三):hdfs 机架感知

摘要: 转自:http://www.cnblogs.com/tgzhu/p/5790572.html client 向 Active NN 发送写请求时,NN为这些数据分配DN地址,HDFS文件块副本的放置对于系统整体的可靠性和性能有关键性影响。一个简单但非优化的副本放置策略是,把副 本分别放在不同机架,甚 阅读全文

posted @ 2016-11-05 09:12 笑明子 阅读(2458) 评论(0) 推荐(0) 编辑

hadoop(二):hdfs HA原理及安装

摘要: 转自:http://www.cnblogs.com/tgzhu/p/5790565.html 早期的hadoop版本,NN是HDFS集群的单点故障点,每一个集群只有一个NN,如果这个机器或进程不可用,整个集群就无法使用。为了解决这个问题,出现了一堆针对HDFS HA的解决方案(如:Linux HA, 阅读全文

posted @ 2016-11-05 09:11 笑明子 阅读(2332) 评论(0) 推荐(0) 编辑

hadoop(一):深度剖析hdfs原理

摘要: 转自:http://www.cnblogs.com/tgzhu/p/5788634.html 在配置hbase集群将 hdfs 挂接到其它镜像盘时,有不少困惑的地方,结合以前的资料再次学习; 大数据底层技术的三大基石起源于Google在2006年之前的三篇论文GFS、Map-Reduce、 Bigt 阅读全文

posted @ 2016-11-05 09:10 笑明子 阅读(3506) 评论(2) 推荐(0) 编辑

导航