|NO.Z.00024|——————————|BigDataEnd|——|Hadoop&HBase.V08|——|HBase.v08|HBase表Region|冷热合并|

一、HBase表的预分区(region)
### --- [HBase]

~~~     [HBase表的预分区]
~~~     [HBase表Region合并]
~~~     [HBase表Region冷合并]
~~~     [HBase表Region热合并]   
### --- 为何要预分区?

~~~     当一个table刚被创建的时候,Hbase默认的分配一个region给table。
~~~     也就是说这个时候,所有的读写请求都会访问到同一个regionServer的同一个region中,
~~~     这个时候就达不到负载均衡的效果了,集群中的其他regionServer就可能会处于比较空闲的状态。
~~~     解决这个问题可以用pre-splitting,在创建table的时候就配置好,生成多个region。
### --- 增加数据读写效率

~~~     负载均衡,防止数据倾斜
~~~     方便集群容灾调度region
~~~     每一个region维护着startRow与endRowKey,
~~~     如果加入的数据符合某个region维护的rowKey范围,则该数据交给这个region维
### --- 手动指定预分区

hbase(main):001:0> create 'person','info1','info2',SPLITS => ['1000','2000','3000']
### --- 也可以把分区规则创建于文件中

[root@linux121 ~]# vim hbase/split.txt
# 文件内容
aaa
bbb
ccc
ddd
### --- 执行

hbase(main):002:0> create 'student','info',SPLITS_FILE => '/root/hbase/split.txt'
二、Region 合并
### --- Region合并说明

~~~     Region的合并不是为了性能,而是出于维护的目的。
### --- 如何进行Region合并
~~~     # 通过Merge类冷合并Region
~~~     需要先关闭hbase集群
~~~     需求:需要把student表中的2个region数据进行合并:
~~~     这里通过org.apache.hadoop.hbase.util.Merge类来实现,不需要进入hbase shell,
~~~     直接执行(需要先关闭hbase集群):

student,,1630580401307.9fc5a96775b411b2e8bc4eb2ec50dcfc.
student,aaa,1630580401307.487741dad92aef3a162851c73038e1f5.
~~~     # 停掉HBase
[root@linux121 ~]# stop-hbase.sh

~~~     # 冷合并分区
[root@linux121 ~]# hbase org.apache.hadoop.hbase.util.Merge student \
student,,1630580401307.9fc5a96775b411b2e8bc4eb2ec50dcfc. \
student,aaa,1630580401307.487741dad92aef3a162851c73038e1f5.

~~~     # 启动HBase
[root@linux121 ~]# start-hbase.sh 
### --- 冷合并region之后状态
~~~     通过online_merge热合并Region:

~~~     # 不需要关闭hbase集群,在线进行合并
~~~     与冷合并不同的是,online_merge的传参是Region的hash值,
~~~     而Region的hash值就是Region名称的最后那段在两个.之间的字符串部分。
~~~     # 需求:需要把yanqi_s表中的2个region数据进行合并:
student,,1630581137950.0a27f2651d34ef2b74dc5501615d2df0.\
student,bbb,1630580401307.a3276c3f7abd5c82c41f966d98203635.

~~~     # 需要进入hbase shell:
merge_region '0a27f2651d34ef2b74dc5501615d2df0','a3276c3f7abd5c82c41f966d98203635'
### --- 进入hbase
[root@linux121 ~]# hbase shell
 
### --- region热合并
hbase(main):001:0> merge_region '0a27f2651d34ef2b74dc5501615d2df0','a3276c3f7abd5c82c41f966d98203635'
三、成功后观察界面:region热合并之后状态

 
 
 
 
 
 
 
 
 

Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of life.It sinks, and I am ready to depart
                                                                                                                                                   ——W.S.Landor

 

posted on   yanqi_vip  阅读(19)  评论(0编辑  收藏  举报

相关博文:
阅读排行:
· 全程不用写代码,我用AI程序员写了一个飞机大战
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· 记一次.NET内存居高不下排查解决与启示
· 白话解读 Dapr 1.15:你的「微服务管家」又秀新绝活了
· DeepSeek 开源周回顾「GitHub 热点速览」
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

导航

统计

点击右上角即可分享
微信分享提示