2011年12月6日

Hadoop HA 学习

摘要: Hadoop HA是一个非常需要重视的问题。众所周知,Haddop是一个SPOF(single point of failure)系统,存在单点问题。对于7×24生产环境,是具有极大的风险。 目前社区版的做法是有两种保障机制,第一种是可以设置一个NFS的目录,存储fsimage和editlog,存储的是实时数据,这样当namenode挂掉后能够通过fsimage和editlog进行完全恢复。第二种是设置secondary namenode,名称很迷惑,但其作用是对fsimage和editlog进行定期的merge,默认是5分钟,所以获得的数据是过期的,存在数据丢失,但是能够恢复大部分 阅读全文

posted @ 2011-12-06 11:31 萌@宇 阅读(1168) 评论(0) 推荐(0) 编辑

导航