2018年5月9日

Hbase搭建-基本操作

摘要: mysql:关系型数据库 RDBMS hive: 数据仓库 进行数据分析,没有实时性 hbase:基于文档的数据库 nosql not only sql hive和hbase的区别: hbase:数据库,不支持分析 hive:数据仓库,用作数据分析 hbase:基于hdfs的非关系型数据库,基于google的bigtable技术实现的。 ... 阅读全文

posted @ 2018-05-09 17:23 飞机耳朵 阅读(250) 评论(0) 推荐(0) 编辑

Hbase写入原理-常用操作-过滤器

摘要: hbase是基于大表的数据库 ===================================== 随机访问和实时读写 hbase和hive的区别: hbase:低延迟实时性,不支持分析 hive:高延迟,分析工具 awk '{print $1}' //默认以'\t'分割,截串取第一个成员 hbase原理: =====================... 阅读全文

posted @ 2018-05-09 17:22 飞机耳朵 阅读(1207) 评论(0) 推荐(0) 编辑

Hbase基本命令和协处理器-rowkey设计原则-hive和hbase结合

摘要: hbase表管理: 表切割 split 'ns1:t1','row1000' 区域切割 split 'REGION_NAME' , 'row500' 区域合并 merge 'ENCODED_REGIONNAME' ,'' 表移动 move 'ENCODED_REGIONNAME','SERVER_... 阅读全文

posted @ 2018-05-09 17:20 飞机耳朵 阅读(474) 评论(0) 推荐(0) 编辑

2018年5月7日

scala实现wordcount方法-商品标签统计-气温统计

摘要: scala实现单词统计 --------------------- import scala.io.Source /** * Created by Administrator on 2018/5/7. */ object WCApp { def main(args: Array[String]): Unit = { ... 阅读全文

posted @ 2018-05-07 20:27 飞机耳朵 阅读(402) 评论(0) 推荐(0) 编辑

2018年5月6日

scala

摘要: script ------------- 文本文件存放源代码,不需要编译,解释执行。 javascript shell python scala ------------- java语句脚本化。 2.11 sql javascript python vbscript shell 安装scala ------------- 1.下载s... 阅读全文

posted @ 2018-05-06 19:25 飞机耳朵 阅读(747) 评论(0) 推荐(0) 编辑

2018年5月3日

hadoop联邦模式的配置

摘要: 1.介绍 对名字空间做负载均衡。不同的NN配置不同的空间。宏观上 是一个整体。 配置多个名称服务,在每个nameservice下使用HA方式配置。 2.集群规划 [ns1] nn1 //s101 nn2 //s102... 阅读全文

posted @ 2018-05-03 17:50 飞机耳朵 阅读(439) 评论(0) 推荐(0) 编辑

2018年4月28日

SSM-mybatis-1

摘要: 回顾 ------------- 1、JVM runtime data area. a.method area 方法区,永久区,metaspace , 共享 b.heap 堆区,共享 heap = young代 + old代理 young ... 阅读全文

posted @ 2018-04-28 18:58 飞机耳朵 阅读(106) 评论(0) 推荐(0) 编辑

SSM-mybatis-2

摘要: 回顾 ------------- 1、JVM runtime data area. a.method area 方法区,永久区,metaspace , 共享 b.heap 堆区,共享 heap = young代 + old代理 young ... 阅读全文

posted @ 2018-04-28 18:57 飞机耳朵 阅读(141) 评论(0) 推荐(0) 编辑

SSM-mybatis-spring容器 复杂和简化方法

摘要: 回顾 ------------- 1、JVM runtime data area. a.method area 方法区,永久区,metaspace , 共享 b.heap 堆区,共享 heap = young代 + old代理 young ... 阅读全文

posted @ 2018-04-28 18:56 飞机耳朵 阅读(383) 评论(0) 推荐(0) 编辑

2018年4月26日

java中反射-内省-代理模式-并发库下重入锁

摘要: 线程安全性 --------------- 1、同步 同步代码块 同步方法 2、synchorize java中任何对象都可以作为锁旗标。 对象内部维护了一个等待队列。 多线程编程时涉及到生产消费关系,可以借助队列来完成。 lock.wait() lock.wait(i... 阅读全文

posted @ 2018-04-26 16:55 飞机耳朵 阅读(189) 评论(0) 推荐(0) 编辑

导航