zlingh

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理
上一页 1 ··· 7 8 9 10 11 12 13 14 下一页

2014年9月22日

摘要: 一、配置1. 在masters文件中添加 Secondary节点的主机名。*注:masters文件用于指定secondary的主机而不是namenode,slaves用于指定datanode和tasktracker,namenode由core-site.xml fs.default.name指定,j... 阅读全文
posted @ 2014-09-22 16:41 zlingh 阅读(1144) 评论(0) 推荐(0) 编辑

2014年9月20日

摘要: 单台master的配置hbase.mastermaster:60000这是我们通常配置的,这样就定义了master是的ip和端口。但是当我们需要配置多台master进行,我们只需要提供端口,因为选择真正的master的事情会又zookeeper去处理。多台master的配置hbase.master.... 阅读全文
posted @ 2014-09-20 23:42 zlingh 阅读(1681) 评论(1) 推荐(0) 编辑

摘要: 关于Hbase的集群管理http://www.linuxidc.com/Linux/2012-07/65909.htm1、如果只增加集群的存储量,建议增加Hadoopdatanode节点。方法:停掉集群包括hadoop和hbase,当然也可以不停掉,直接在hadoop namenode的配置文件Sl... 阅读全文
posted @ 2014-09-20 23:36 zlingh 阅读(5452) 评论(1) 推荐(0) 编辑

摘要: 1.hbase的balance策略是region数量策略,即维持每个regionserver的region数量基本一致,这并未考虑一个table的region可能都落到一个refionserver的不好情况。这就需要开发者自己开发LoadBalancer插件。有三种策略:基于表Table级别的Bal... 阅读全文
posted @ 2014-09-20 23:27 zlingh 阅读(250) 评论(0) 推荐(0) 编辑

摘要: HBase中有两张特殊的Table,-ROOT-和.META..META.:记录了用户表的Region信息,它可以有多高region(这的意思是说.META.表可以分 裂成多个region,和用户表一样)-ROOT-:记录了.META.表的Region信息,-ROOT-只有一个region(也就是说... 阅读全文
posted @ 2014-09-20 23:09 zlingh 阅读(2279) 评论(0) 推荐(0) 编辑

摘要: http://www.tuicool.com/articles/iieIz2一、简介historystarted by chad walters and jim2006.11 G release paper on BigTable2007.2 inital HBase prototype creat... 阅读全文
posted @ 2014-09-20 22:45 zlingh 阅读(329) 评论(0) 推荐(0) 编辑

摘要: 关于如何设定数据块的大小,我们应用一段HFile源码中的注释:我们推荐将数据块的大小设置为8KB至1MB。大的数据块比较适合顺序的查询(比如Scan),但不适合随机查询,想想看,每一次随机查询可能都需要你去解压缩一个大的数据块。小的数据块适合随机的查询,但是需要更多的内存来保存数据块的索引(Data... 阅读全文
posted @ 2014-09-20 22:27 zlingh 阅读(2965) 评论(0) 推荐(0) 编辑

摘要: 一,基本命令:建表:create 'testtable','coulmn1','coulmn2'也可以建表时加coulmn的属性如:create 'testtable',{NAME => 'coulmn1', BLOOMFILTER => 'NONE', REPLICATION_SCOPE => '... 阅读全文
posted @ 2014-09-20 22:18 zlingh 阅读(980) 评论(0) 推荐(0) 编辑

摘要: NoSQL现在风生水起,hbase的使用也越来越广,但目前几乎所有的NoSQL产品在运维上都没法和DB相提并论,在这篇blog中来总结下我们在运维hbase时的一些问题以及解决的方法,也希望得到更多hbase同行们的建议,:)在运维hbase时,目前我们最为关注的主要是三大方面的状况:1. Clus... 阅读全文
posted @ 2014-09-20 22:12 zlingh 阅读(1328) 评论(0) 推荐(0) 编辑

摘要: 这里面说的read既包括get,也包括scan,实际底层来看这两个操作也是一样的。我们将要讨论的是,当我们从一张表读取数据的时候hbase到底是怎么处理的。分二种情况来看,第一种就是表刚创建,所有put的数据还在memstore中,并没有刷新到hdfs上;第二种情况是,该store已经进行多次的fl... 阅读全文
posted @ 2014-09-20 21:57 zlingh 阅读(336) 评论(0) 推荐(0) 编辑

上一页 1 ··· 7 8 9 10 11 12 13 14 下一页