摘要:版权声明:本文为博主原创文章,未经博主允许不得转载。 版权声明:本文为博主原创文章,未经博主允许不得转载。 [java] view plain copy <div><span style="font-family: Arial, Helvetica, sans-serif;"> </span></d
阅读全文
摘要:说明: 1.第一部分为代码 2.第二部分为工程pom文件 [java] view plain copy import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.*; import org.apache.h
阅读全文
摘要:环境配置: hadoop-2.0.0-cdh4.3.0 (4 nodes, 24G mem/node) hbase-0.94.6-cdh4.3.0 (4 nodes,maxHeapMB=9973/node) hive-0.10.0-cdh4.3.0 一、查询性能比较: query1: select
阅读全文
摘要:package mapred.hbase;import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.T
阅读全文
摘要:Hbase在生态系统中的位置 Hbase存储的逻辑视图 Hbase的存储格式 Hbase写数据流程 Hbase快速响应数据 Hbase在生态系统中的位置 HBase位于结构化存储层,Hadoop HDFS为HBase提供了高可靠性的底层存储支持,Hadoop MapReduce为HBase提供了高性
阅读全文
摘要:HRegionServer内部管理了一系列HRegion对象,每个HRegion对 应了table中的一个region,HRegion中由多 个HStore组成。每个HStore对应了Table中的一个column family的存储,可以看出每个columnfamily其实就是一个集中的存储单元,
阅读全文
摘要:1.Client写入需要哪些过程? 2.Hbase是如何读取数据的? Client写入 -> 存入MemStore,一直到MemStore满 -> Flush成一个StoreFile,直至增长到一定阈值 -> 出发Compact合并操作 -> 多个StoreFile合并成一个StoreFile,同时
阅读全文
摘要:下面我们看看HBase Shell的一些基本操作命令,我列出了几个常用的HBase Shell命令,如下: 名称 命令表达式 创建表 create '表名称', '列名称1','列名称2','列名称N' 添加记录 put '表名称', '行名称', '列名称:', '值' 查看记录 get '表名称
阅读全文
摘要:1/ 集群各个节点时间不一致( ) 2/勇敢的删除的log(/hbase/.log) 启动region server的时候报如下错误: 2013-09-09 11:23:05,863 DEBUG org.apache.hadoop.hbase.regionserver.HRegionServer:
阅读全文
摘要:Author:Pirate Leo myBlog: http://blog.csdn.net/pirateleo/ myEmail: codeevoship@gmail.com 转载请注明出处,谢谢。 文中可能涉及到的API: Hadoop/HDFS:http://hadoop.apache.org
阅读全文
摘要:HBase自带的export/import机制可以实现Backup Restore功能。而且可以实现增量备份。 下面设增量备份的python脚本 在这个脚本中,每天做增量备份,每个月15日做全备份。 而Restore机制就更加简单 hbase org.apache.hadoop.hbase.mapr
阅读全文
摘要:2012-10-28 11:43:35| 分类: zookeeper|字号 订阅 学习借鉴 1.部署 本章节主要讲述如何部署ZooKeeper,包括以下三部分的内容: 1. 系统环境 2. 集群模式的配置 3. 单机模式的配置 系统环境和集群模式配置这两节内容大体讲述了如何部署一个能够用于生产环境的
阅读全文
摘要:最近测试Hadoop和Hbase集群,一次断电之后,Hbase无法正常启动,经过一系列配置之后,终于使得Hbase重新启动,但是却出现了新的问题,新建表时,总是提示Table already exists,很是郁闷,不知道什么原因,虽说以前建过同名的表,可是HDFS上和Hbase相关的东西都已经删除
阅读全文