摘要: 一、数据准备 现准备原始json数据(test.json)如下: 现在将数据导入到hive中,并且最终想要得到这么一个结果: 可以使用:内置函数(get_json_object)或者自定义函数完成 二、get_json_object(string json_string, string path) 阅读全文
posted @ 2019-04-02 18:03 xiaolaotou 阅读(83362) 评论(2) 推荐(4) 编辑
该文被密码保护。 阅读全文
posted @ 2019-04-02 17:29 xiaolaotou 阅读(1) 评论(0) 推荐(0) 编辑
摘要: 一、软件下载 1、访问:http://phoenix.apache.org/ 2、点击: 3、进入以下内容:点击 4、跳转到 5、跳转到 6、点击安装包,进入 点击进行下载: 二、安装 phonenix主要是与hbase进行集成,也可以称之为hbase sql的框架。 进入到phonenix的解压文 阅读全文
posted @ 2019-04-02 16:04 xiaolaotou 阅读(1628) 评论(0) 推荐(0) 编辑
摘要: 一、系统架构 从HBase的架构图上可以看出,HBase中的组件包括Client、Zookeeper、HMaster、HRegionServer、HRegion、Store、MemStore、StoreFile、HFile、HLog等,接下来介绍他们的作用。 Client 1、Hbase有两张特殊表 阅读全文
posted @ 2019-04-02 15:45 xiaolaotou 阅读(236) 评论(0) 推荐(0) 编辑
摘要: 一、过滤器概念 基础API中的查询操作在面对大量数据的时候是非常物无力的,这里Hbase提供了高级的查询方法:Filter(过滤器)。过滤器可以根据簇、列、版本等更多的条件来对数据进行过滤,基于Hbase本身提供的三维有序(主键有序、列有序、版本有序),这些Filter可以高效的完成查询过滤的任务。 阅读全文
posted @ 2019-04-02 11:47 xiaolaotou 阅读(903) 评论(0) 推荐(0) 编辑