2018年5月9日

使用MR编程hbase和hbase调优-布隆过滤器

摘要： 使用MR编程操纵hbase ====================================== 1、TableInputFormat输入K,V格式 ImmutableBytesWritable //相当于textInputFormat中的偏移量 Result //真实数据 使用conf设置tabl... 阅读全文

posted @ 2018-05-09 18:02 飞机耳朵 阅读(273) 评论(0) 推荐(0) 编辑

Hbase搭建-基本操作

摘要： mysql：关系型数据库 RDBMS hive： 数据仓库 进行数据分析，没有实时性 hbase：基于文档的数据库 nosql not only sql hive和hbase的区别： hbase:数据库，不支持分析 hive：数据仓库，用作数据分析 hbase：基于hdfs的非关系型数据库，基于google的bigtable技术实现的。 ... 阅读全文

posted @ 2018-05-09 17:23 飞机耳朵 阅读(250) 评论(0) 推荐(0) 编辑

Hbase写入原理-常用操作-过滤器

摘要： hbase是基于大表的数据库 ===================================== 随机访问和实时读写 hbase和hive的区别： hbase：低延迟实时性，不支持分析 hive：高延迟，分析工具 awk '{print $1}' //默认以'\t'分割，截串取第一个成员 hbase原理： =====================... 阅读全文

posted @ 2018-05-09 17:22 飞机耳朵 阅读(1207) 评论(0) 推荐(0) 编辑

Hbase基本命令和协处理器-rowkey设计原则-hive和hbase结合

摘要： hbase表管理： 表切割 split 'ns1:t1','row1000' 区域切割 split 'REGION_NAME' , 'row500' 区域合并 merge 'ENCODED_REGIONNAME' ,'' 表移动 move 'ENCODED_REGIONNAME','SERVER_... 阅读全文

posted @ 2018-05-09 17:20 飞机耳朵 阅读(474) 评论(0) 推荐(0) 编辑

导航