随笔分类 -  HBase

摘要:hbase有一个region一直处于rit状态,对该region进行move/assign/unassign都没有反应,使用hbck2进行assigns/unassigns也没有反应 查改hbase当前的lock状态发现 hbase(main):003:0> list_locks NAMESPACE 阅读全文
posted @ 2022-06-16 14:12 匠人先生 阅读(945) 评论(0) 推荐(0) 编辑
摘要:HMaster页面上Regions In Transition部分有一个region一直处于transition状态,但是没有超时,而是不断重试,1s会重试4-5次,region信息 NS1:TB1,4120J5402AAD3N76TRTffUlocation1618464157000,163790 阅读全文
posted @ 2022-06-16 14:00 匠人先生 阅读(464) 评论(0) 推荐(0) 编辑
摘要:hbase集群重启后异常,发现是master初始化失败导致的,在master启动日志中发现问题原因为 2022-05-26 14:06:15,645 WARN org.apache.hadoop.hbase.master.HMaster: hbase:namespace,,1607716627354 阅读全文
posted @ 2022-06-16 10:14 匠人先生 阅读(707) 评论(0) 推荐(0) 编辑
摘要:现象 hbase的region server进程大面积重启 排查 第一个重启的region server节点有如下报错: 2021-12-03 14:44:11,948 WARN org.apache.hadoop.hdfs.DFSClient: Failed to connect to /$ser 阅读全文
posted @ 2022-05-19 14:15 匠人先生 阅读(1169) 评论(0) 推荐(0) 编辑
摘要:现象 hbase hmaster启动报错 master.HMaster: Failed to become active master java.lang.IllegalStateException: The procedure WAL relies on the ability to hsync 阅读全文
posted @ 2021-05-13 11:01 匠人先生 阅读(375) 评论(0) 推荐(0) 编辑
摘要:在hive中创建外部表: CREATE EXTERNAL TABLE hive_hbase_table(key string, name string,desc string) STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' 阅读全文
posted @ 2019-01-21 20:38 匠人先生 阅读(2372) 评论(0) 推荐(1) 编辑
摘要:ambari metrics collector内置hbase目录位于 /usr/lib/ams-hbase 配置位于 /etc/ams-hbase/conf 通过ruby启动 /usr/lib/ams-hbase/bin/hirb.rb 实际的启动命令为 /usr/lib/ams-hbase/bi 阅读全文
posted @ 2019-01-17 21:21 匠人先生 阅读(4934) 评论(0) 推荐(2) 编辑
摘要:hbase 2.0.2 hbase standalone方式启动报错: 2019-01-17 15:49:08,730 ERROR [Thread-24] master.HMaster: Failed to become active master java.lang.IllegalStateExc 阅读全文
posted @ 2019-01-17 16:43 匠人先生 阅读(3139) 评论(0) 推荐(3) 编辑
摘要:spark 2.1.1 spark在写数据到hive外部表(底层数据在hbase中)时会报错 Caused by: java.lang.ClassCastException: org.apache.hadoop.hive.hbase.HiveHBaseTableOutputFormat cannot 阅读全文
posted @ 2018-12-18 16:15 匠人先生 阅读(2820) 评论(1) 推荐(1) 编辑
摘要:问题现象:hive执行sql报错 select count(*) from test_hive_table; 报错 Error: java.io.IOException: org.apache.hadoop.hbase.client.RetriesExhaustedException: Failed 阅读全文
posted @ 2018-12-12 18:50 匠人先生 阅读(5274) 评论(0) 推荐(0) 编辑
摘要:java中访问hbase有两种方式,一种是hbase自带的client,一种是通过hbase thrift 1 hbase client示例 Configuration conf = HBaseConfiguration.create(); conf.set(HConstants.ZOOKEEPER 阅读全文
posted @ 2018-12-12 16:47 匠人先生 阅读(781) 评论(0) 推荐(0) 编辑
摘要:最近hbase集群很多region server挂掉,查看其中一个RegionServer1日志发现,17:17:14挂的时候服务器压力很大,有大量的responseTooSlow,也有不少gc,但是当时内存还有很多剩余,不是因为oom被kill 2018-03-13T17:17:13.372+08 阅读全文
posted @ 2018-10-18 17:49 匠人先生 阅读(3549) 评论(0) 推荐(1) 编辑

点击右上角即可分享
微信分享提示