摘要:
在前面的博客中,我们已经完成了数据的导入,清洗以及将hive数据库中的数据导入到windows系统的mysql数据库 到目前为止,我们已将项目完成了大部分,现在就剩下实现可视化界面,完成柱状图了,这个需要eharts 下面是网址:https://echarts.apache.org/zh/index 阅读全文
摘要:
对于上篇博客,有人问道如何查看hive数据库的数据表位置 1、在虚拟机中启动hive 2、在网页上输入 node1:9870,进入hdfs界面 3、点击右上角的标志 4、进入user/hive/warehouse目录就能找到对应数据表 阅读全文
摘要:
继续上文的解答,完成数据处理之后,基本上实现了将数据导入hive数据库,现在需要将hive数据库的数据导入linux系统的mysql数据库 要想实现上步操作,需要用到sqoop,(这个已经提前下载完成,在之前的博客有介绍) 主要用到的语句为 bin/sqoop export \ --connect 阅读全文
摘要:
根据上篇博客发布的问题,进行题目解答 1、数据导入 Create table test2(day_id varchar(30), sale_nbr varchar(30), buy_nbr varchar(30), cnt varchar(30), round varchar(30)) row fo 阅读全文
摘要:
本周我们要进行hive数据分析,老师给我们出了一个例题: 样表(sales_sample_20170310)字段说明: day_id 日期编号; sale_nbr 卖出方代码; buy_nbr 买入方代码; cnt 数量 round 金额 卖出方和买入方又分为3种类型: 以'C'开头的表示类型为C, 阅读全文
摘要:
本周老师要求我们连接hive数据库,对数据进行清洗,和不同数据库之间的转换,根据查找资料,这个需要sqoop组件。 配置sqoop 1,下载sqoop 下载地址:http://mirrors.hust.edu.cn/apache/sqoop/1.4.6/ 2、上传文件包并解压 tar -zxf sq 阅读全文
摘要:
今天尝试连接hbase数据库,在之前完成了hbase、zookeeper和phoenix三个组件,现在尝试连接hbase数据库 连接phoenix package database; import java.sql.*; import java.util.Properties; public cla 阅读全文
摘要:
为了方便写SQL语句,我在linux系统上配置了phoenix 1、下载phoenix 官网:https://phoenix.apache.org/ phoenix-hbase-2.4-5.1.3-bin.tar.gz 2、将phoenix-hbase-2.4-5.1.3-bin.tar.gz移到l 阅读全文
摘要:
今天我开始进行zookeeper的配置和学习 1下载zookeeper 官网 :https://zookeeper.apache.org/releases.html 将安装包拖到linux系统进行解压: tar -zxvf apache-zookeeper-3.5.7-bin.tar.gz -C / 阅读全文