随笔分类 -  Hbase 错误记录与调优

摘要:1、异常信息 trying to load more than 2048 hfiles to family 2、分析 在做hbase数据迁移的时候,源hbase集群的某张表hfile文件数超过了2048,由于在配置文件里面配置的值刚好为2048,导致加载的时候,失败。 3、解决 修改hbase配置文 阅读全文
posted @ 2020-11-25 14:59 北漂-boy 阅读(665) 评论(0) 推荐(0) 编辑
摘要:1.1 现象 通过hbase shell disable表,显示表以及关闭,但是使用drop table_name,却显示表状态为disableing,不能正常被删除。 1.2 分析 1)通过以下命令查看表状态: hbase> is_disabled table_name false hbase> 阅读全文
posted @ 2020-11-25 14:33 北漂-boy 阅读(3068) 评论(1) 推荐(0) 编辑
摘要:1、异常信息 使用hbase shell修改hbase表或者创建表的时候,报如下信息: 从上面的异常可以看出,该create语句执行了600多秒,导致异常发生 2、解决 在hbase的配置文件里面添加如下参数: hbase.client.sync.wait.timeout.msec 3、shell 阅读全文
posted @ 2020-11-25 12:45 北漂-boy 阅读(2854) 评论(2) 推荐(0) 编辑
摘要:1、现象 通过distcp + bulkload方式进行hbase数据迁移的时候,由于开启的线程数过多,导致在hbase shell里面创建表的时候,提示操作系统不能分配内存,现象: 2、分析 出现这种现象的原因就是操作系统内存不足。 3、解决 降低数据迁移的并发线程数 2)清理操作系统缓存(临时作 阅读全文
posted @ 2020-11-12 13:07 北漂-boy 阅读(349) 评论(0) 推荐(0) 编辑
摘要:使用select count(*) 出现如下错误: Error: Task org.apache.phoenix.job.JobManager$InstrumentedJobFutureTask@6e91893 rejected from org.apache.phoenix.job.JobMana 阅读全文
posted @ 2020-07-03 15:29 北漂-boy 阅读(1422) 评论(0) 推荐(0) 编辑
摘要:1、情况说明,测试集群,6台hdfs,一台hbase 在使用hbase的时候,出现hbase总是挂掉问题 2、错误现象: 2020-06-05 15:28:27,670 WARN [RS_OPEN_META-bb-cc-aa:16020-0-MetaLogRoller] wal.ProtobufLo 阅读全文
posted @ 2020-06-12 12:44 北漂-boy 阅读(2210) 评论(0) 推荐(0) 编辑
摘要:1、hbase regionserver 错误日志 2020-04-07 15:53:36,604 WARN [hadoop01:16020-0.append-pool2-t1] wal.FSHLog: Append sequenceId=3897, requesting roll of WAL j 阅读全文
posted @ 2020-04-07 16:31 北漂-boy 阅读(1209) 评论(0) 推荐(0) 编辑
摘要:原因分析: 线上hbase,在凌晨1点左右,发现某一台regionserver进行了重启(regionserver加了守护线程) 1、查看master日志: 2020-02-27 01:04:57,001 ERROR [RpcServer.FifoRWQ.default.read.handler=2 阅读全文
posted @ 2020-02-27 10:39 北漂-boy 阅读(2889) 评论(0) 推荐(0) 编辑
摘要:问题现象: 使用hbase shell 连接报如下问题: 2019-10-09 10:37:18,855 ERROR [main] zookeeper.RecoverableZooKeeper: ZooKeeper exists failed after 4 attempts2019-10-09 1 阅读全文
posted @ 2019-10-09 10:55 北漂-boy 阅读(10095) 评论(0) 推荐(0) 编辑
摘要:错误: 解决办法: 在hbase RegionServer的hbase-site.xml添加如下配置 阅读全文
posted @ 2019-08-30 10:36 北漂-boy 阅读(747) 评论(0) 推荐(0) 编辑
摘要:解决方法1 错误如下 错误分析:从错误的信息来看,是关于协处理器的错误,可能是region或者表没有使用协处理器。 web界面查看表信息如下 从web信息来看,确实这张表没有相关协处理器的信息,正常通过phoenix创建表以后,都会自带phoenix相关的协处理器信息,如上面红框圈起来的地方,上图有 阅读全文
posted @ 2019-08-29 18:13 北漂-boy 阅读(1888) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示