摘要: Hive之累计报表生成 1. 原始数据 u01 2019/1/21 5u02 2019/1/23 6u03 2019/1/22 8u04 2019/1/20 3u01 2019/1/23 6u01 2019/2/21 8u02 2019/1/23 6u01 2019/2/22 4 2. 建表映射上述 阅读全文
posted @ 2019-12-02 22:36 Striving_For_Dream 阅读(598) 评论(0) 推荐(1) 编辑
摘要: 大数据技术之Sqoop 一、Sqoop简介 Apache Sqoop(TM)是一种旨在有效地在Apache Hadoop和诸如关系数据库等结构化数据存储之间传输大量数据的工具。 Sqoop于2012年3月孵化出来,现在是一个顶级的Apache项目。 请注意,1.99.7与1.4.6不兼容,且没有特征 阅读全文
posted @ 2019-12-02 13:44 Striving_For_Dream 阅读(206) 评论(0) 推荐(1) 编辑
摘要: Hadoop运行环境搭建 更改为阿里的Centos7的yum源 #下载wget yum -y install wget #echo 下载阿里云的yum源配置 Centos-7.repo wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors. 阅读全文
posted @ 2019-12-02 13:24 Striving_For_Dream 阅读(165) 评论(0) 推荐(1) 编辑
摘要: Hive安装部署与配置 1.1 Hive安装地址 1)Hive官网地址: http://hive.apache.org/ 2)文档查看地址: https://cwiki.apache.org/confluence/display/Hive/GettingStarted 3)下载地址: http:// 阅读全文
posted @ 2019-12-02 12:49 Striving_For_Dream 阅读(321) 评论(0) 推荐(1) 编辑
摘要: HBase的部署与其它相关组件(Hive和Phoenix)的集成 一、HBase部署 1.1、Zookeeper正常部署 首先保证Zookeeper集群的正常部署,并启动之: /opt/module/zookeeper-3.4.5/bin/zkServer.sh start 1.2、Hadoop正常 阅读全文
posted @ 2019-12-02 12:31 Striving_For_Dream 阅读(408) 评论(0) 推荐(1) 编辑
/*快速评论*/ #div_digg { position: fixed; bottom: 10px; right: 15px; border: 2px solid #ECD7B1; padding: 10px; width: 140px; background-color: #fff; border-radius: 5px 5px 5px 5px !important; box-shadow: 0 0 0 1px #5F5A4B, 1px 1px 6px 1px rgba(10, 10, 0, 0.5); }