上一页 1 ··· 3 4 5 6 7 8 9 10 11 ··· 13 下一页
摘要: 1、关闭WAL日志 在put数据api中关闭WAL 2、设置AutoFlush 3、预创建Region 4、延迟WAL刷新 5、通过HTablePool写入 阅读全文
posted @ 2021-05-11 16:34 life_start 阅读(98) 评论(0) 推荐(0) 编辑
摘要: zkclient Zookeeper客户端提供了基本的操作,比如,创建会话、创建节点、读取节点、更新数据、删除节点和检查节点是否存在等。但对于开发人员来说,Zookeeper提供的基本操纵还是有一些不足之处。本篇博客就聊聊这些不足之处和两款开源框架ZKClient和Curator。 Zookeepe 阅读全文
posted @ 2021-05-11 16:33 life_start 阅读(115) 评论(0) 推荐(0) 编辑
摘要: 本篇文档使用kafka版本为:0.9.0.0 问题1、在现场项目中,kafka连接正常一直无数据? 1)通常是确认配置是否正确,包含任务配置,ip端口号; 2)查看topic offset:是否有新数据进来,数据是否被消费掉了, 3)然后检查kafka服务是否正常,查看服务是否有节点挂掉,topic 阅读全文
posted @ 2021-05-11 16:31 life_start 阅读(1286) 评论(0) 推荐(0) 编辑
摘要: 本篇文章主要记录一下Spark如何读写Hbase数据问题 1、Spark如何读取Hbase数据 spark原生API读取Hbase数据时,是使用一个partition加载一个Region的数据的。 此方式可能产生问题: 1)单个region太大,而spark每个partition资源是配置分配的,一 阅读全文
posted @ 2021-05-11 16:26 life_start 阅读(606) 评论(0) 推荐(0) 编辑
摘要: 三种时区表示方式,LocalDate转成字符串日期和ts的方法 LocalDateTime localDateTime = null; //时区写法1: String timezone = "Asia/Shanghai"; //###### 字符串时间转ts ZoneId zoneId = Zone 阅读全文
posted @ 2021-05-08 16:44 life_start 阅读(3320) 评论(0) 推荐(0) 编辑
摘要: 问题描述: HBASE表的管理以REGION分区为核心,通常面临如下几个问题: 1) 数据如何存储到指定的region分区,即rowkey设计,region splitkey设计 2)设计的splitkey是否可以解决热点问题 3)设计的splitkey是否可以解决均匀分布,避免自动分裂的问题 4) 阅读全文
posted @ 2021-05-08 16:24 life_start 阅读(694) 评论(0) 推荐(0) 编辑
该文被密码保护。 阅读全文
posted @ 2018-01-25 19:06 life_start 阅读(1) 评论(0) 推荐(0) 编辑
该文被密码保护。 阅读全文
posted @ 2017-12-14 19:10 life_start 阅读(1) 评论(0) 推荐(0) 编辑
摘要: assemly 打包详解:https://www.cnblogs.com/swordfall/p/15044415.html Maven可以使用mvn package指令对项目进行打包,如果使用Java -jar xxx.jar执行运行jar文件,会出现"no main manifest attri 阅读全文
posted @ 2017-12-14 14:06 life_start 阅读(12) 评论(0) 推荐(0) 编辑
该文被密码保护。 阅读全文
posted @ 2017-11-10 14:14 life_start 阅读(2) 评论(0) 推荐(0) 编辑
上一页 1 ··· 3 4 5 6 7 8 9 10 11 ··· 13 下一页