摘要: 1、减少节点 减少:graceful_stop.sh VA128 系统会把region从对应服务器上移出去,减少扰动。 重新启动节点: hbase-daemon.sh start regionserver 2、滚动重启 使用 hbase hbck 可以确认集群数据的一致性(meta 表) 3、新增服 阅读全文
posted @ 2014-11-14 16:01 lihui1625 阅读(132) 评论(0) 推荐(0) 编辑
摘要: 1、垃圾回收优化 (1)、HMaster:通常不会产生问题,因为master没有处理任何过重的负载,并且实际的数据服务并不经过它。默认配置: -Dproc_master -XX:OnOutOfMemoryError=kill -9 %p -Xmx4g -XX:+UseConcMarkSweepGC 阅读全文
posted @ 2014-11-14 16:00 lihui1625 阅读(184) 评论(0) 推荐(0) 编辑
摘要: 1、Context 监控实现: GangliaContext : 推送至Ganglia FileContext: 写入文件 TimeStampingFileContext: 写入文件,带时间戳 CompositeContext: 多个实现 NullContext: 不监控 NullContextWi 阅读全文
posted @ 2014-11-14 15:59 lihui1625 阅读(541) 评论(0) 推荐(0) 编辑
摘要: 1、行健设计 (1)、存储方式:磁盘上一个列族下所有的单元格都存储在一个存储文件(store file)中,不同列族的单元格不会出现在同一个存储文件中。 (2)、NULL 不会存储在HBase表中。 (3)、每个单元格在实际存储时也保存了行健和列键,即单独存储了它在表中所处位置的相关信息。 (4)、 阅读全文
posted @ 2014-11-14 15:59 lihui1625 阅读(127) 评论(0) 推荐(0) 编辑
摘要: 1、入门 面向列族: 物理上所有列族成员都一起存放在文件系统中,调优和存储都是在列族这个层次上进行,最好所有列族成员都有相同的访问模式。 -ROOT-表: 包含.META. 表的区域列表。 .META. 表: 包含所有用户空间区域的列表,以区域名为键。 区域名: 表名+起始行+创建时间+MD5,例子 阅读全文
posted @ 2014-11-14 15:58 lihui1625 阅读(106) 评论(0) 推荐(0) 编辑
摘要: 1、入门 面向列族: 物理上所有列族成员都一起存放在文件系统中,调优和存储都是在列族这个层次上进行,最好所有列族成员都有相同的访问模式。 -ROOT-表: 包含.META. 表的区域列表。 .META. 表: 包含所有用户空间区域的列表,以区域名为键。 区域名: 表名+起始行+创建时间+MD5,例子 阅读全文
posted @ 2014-11-14 15:58 lihui1625 阅读(82) 评论(0) 推荐(0) 编辑
摘要: 使用场合: 1、从文件读取数据导入HBase 2、从HBase 读取数据 阅读全文
posted @ 2014-11-14 15:58 lihui1625 阅读(104) 评论(0) 推荐(0) 编辑
摘要: 1、REST 支持现有的基于Web的体系,能够完美融合反向代理和其他缓存技术,并行运行许多Rest服务可以分摊他们之间的负载。 2、Thrift / Avro 当用户吞吐量角度考虑需要的最佳性能,可以使用严谨的二进制协议。 3、HBase Shell hbase shell 基于JRuby 状态信息 阅读全文
posted @ 2014-11-14 11:39 lihui1625 阅读(157) 评论(0) 推荐(0) 编辑
摘要: 1、创建表 hbaseAdmin.createTable(htableDescriptor); hbaseAdmin.createTable(htableDescriptor, splitKeys); hbaseAdmin.createTable(htableDescriptor, startKey 阅读全文
posted @ 2014-11-14 10:50 lihui1625 阅读(209) 评论(0) 推荐(0) 编辑
摘要: 1、比较运算符 CompareFilter.CompareOp.LESS CompareFilter.CompareOp.LESS_OR_EQUAL CompareFilter.CompareOp.EQUAL CompareFilter.CompareOp.NOT_EQUAL CompareFilt 阅读全文
posted @ 2014-11-14 10:49 lihui1625 阅读(211) 评论(0) 推荐(0) 编辑