随笔分类 - Hbase 错误记录与调优
摘要:1、异常信息 trying to load more than 2048 hfiles to family 2、分析 在做hbase数据迁移的时候,源hbase集群的某张表hfile文件数超过了2048,由于在配置文件里面配置的值刚好为2048,导致加载的时候,失败。 3、解决 修改hbase配置文
阅读全文
摘要:1.1 现象 通过hbase shell disable表,显示表以及关闭,但是使用drop table_name,却显示表状态为disableing,不能正常被删除。 1.2 分析 1)通过以下命令查看表状态: hbase> is_disabled table_name false hbase>
阅读全文
摘要:1、异常信息 使用hbase shell修改hbase表或者创建表的时候,报如下信息: 从上面的异常可以看出,该create语句执行了600多秒,导致异常发生 2、解决 在hbase的配置文件里面添加如下参数: hbase.client.sync.wait.timeout.msec 3、shell
阅读全文
摘要:1、现象 通过distcp + bulkload方式进行hbase数据迁移的时候,由于开启的线程数过多,导致在hbase shell里面创建表的时候,提示操作系统不能分配内存,现象: 2、分析 出现这种现象的原因就是操作系统内存不足。 3、解决 降低数据迁移的并发线程数 2)清理操作系统缓存(临时作
阅读全文
摘要:使用select count(*) 出现如下错误: Error: Task org.apache.phoenix.job.JobManager$InstrumentedJobFutureTask@6e91893 rejected from org.apache.phoenix.job.JobMana
阅读全文
摘要:1、情况说明,测试集群,6台hdfs,一台hbase 在使用hbase的时候,出现hbase总是挂掉问题 2、错误现象: 2020-06-05 15:28:27,670 WARN [RS_OPEN_META-bb-cc-aa:16020-0-MetaLogRoller] wal.ProtobufLo
阅读全文
摘要:1、hbase regionserver 错误日志 2020-04-07 15:53:36,604 WARN [hadoop01:16020-0.append-pool2-t1] wal.FSHLog: Append sequenceId=3897, requesting roll of WAL j
阅读全文
摘要:原因分析: 线上hbase,在凌晨1点左右,发现某一台regionserver进行了重启(regionserver加了守护线程) 1、查看master日志: 2020-02-27 01:04:57,001 ERROR [RpcServer.FifoRWQ.default.read.handler=2
阅读全文
摘要:问题现象: 使用hbase shell 连接报如下问题: 2019-10-09 10:37:18,855 ERROR [main] zookeeper.RecoverableZooKeeper: ZooKeeper exists failed after 4 attempts2019-10-09 1
阅读全文
摘要:错误: 解决办法: 在hbase RegionServer的hbase-site.xml添加如下配置
阅读全文
摘要:解决方法1 错误如下 错误分析:从错误的信息来看,是关于协处理器的错误,可能是region或者表没有使用协处理器。 web界面查看表信息如下 从web信息来看,确实这张表没有相关协处理器的信息,正常通过phoenix创建表以后,都会自带phoenix相关的协处理器信息,如上面红框圈起来的地方,上图有
阅读全文