摘要: 提及磁盘阵列,大家可能都不会感到陌生。这项技术利用多块磁盘组合成一个逻辑磁盘,数据的读写也按照不同的分散排列方式,取自或存储于不同的磁盘中。该技术所带来的好处是它不仅可以利用多块硬盘为系统组建出一个更大的存储空间,更重要的是它可以提高磁盘数据的读写性能和容错能力。正是由于RAID具有这些特点,使它成了服务器配备存储系统时的首选。   在阵列卡的使用配置中,大家可能更多的会考虑使用哪种阵列方式,而忽略了对阵列卡其它一些设置项的关注,而正是这种疏忽常常会带来很大的性能差异,接下来我们就以cache写入方式为例,来揭示在进行阵列卡配置时不同的设置对于系统性能产生的影响。 阅读全文
posted @ 2013-07-16 16:36 菜教主 阅读(1908) 评论(0) 推荐(0) 编辑
摘要: 项目自年初以来,围绕一个非常简单的架构HDFS被设计成:主守护程序,被称为NameNode的存储文件系统 元数据 ,而从守护进程,称为DataNode节点,存储文件系统的 数据 。NameNode要求高度可靠和高效,是存储PB级HDFS中成千上万的集群多年积累的关键生产数据,架构简单。然而,在相当长的一段时间里,HDFS集群安全受到NameNode的单点故障(SPOF)的威胁。在2月份的第一个beta版本CDH4以来,引入Standy NameNode来解决这个问题,它提供了自动热备份的故障转移能力。 。 几个星期前, Cloudera发布了CDH 4.1最新的更新版本,这是第一个真正意义上的独立高可用性HDFS NameNode的hadoop版本,不依赖于特殊的硬件或外部软件。这篇文章从开发者的角度来看这个新功能,解释了内部运作原理。 阅读全文
posted @ 2013-07-16 16:27 菜教主 阅读(1557) 评论(0) 推荐(1) 编辑