2019年12月23日
hive的shell用法（脑子糊涂了，对着脚本第一行是 #!/bin/sh 疯狂执行hive -f 结果报错）
摘要： hive脚本的执行方式 hive脚本的执行方式大致有三种： hive控制台执行； hive -e "SQL"执行； hive -f SQL文件执行；参考hive用法： usage: hive -d,--define <key=value> Variable subsitution to apply 阅读全文
posted @ 2019-12-23 22:50 Xiaohu_BigData 阅读(1401) 评论(0) 推荐(0) 编辑
Week08_day01 (Hive 自定义函数 UDF 一个输入，一个输出（最常用）)
摘要： 当我们进入企业就会发现，很多时候，企业的数据都是加密的，我们拿到的数据没办法使用Hive自带的函数去解决，我们就需要自己去定义函数去查看，哈哈，然而企业一般不会将解密的代码给你的，只需要会用，但是我们也需要知道怎么去实现。 1、打开编译器，我使用的myEclipse, 在maven项目中添加依赖 < 阅读全文
posted @ 2019-12-23 22:01 Xiaohu_BigData 阅读(566) 评论(0) 推荐(0) 编辑
Week08_day01 (Hive开窗函数 row_number()的使用 （求出所有薪水前两名的部门）)
摘要： 数据准备： 7369,SMITH,CLERK,7902,1980-12-17,800,null,20 7499,ALLEN,SALESMAN,7698,1981-02-20,1600,300,30 7521,WARD,SALESMAN,7698,1981-02-22,1250,500,30 7566 阅读全文
posted @ 2019-12-23 20:54 Xiaohu_BigData 阅读(556) 评论(0) 推荐(0) 编辑
Week08_day01 (Hive实现按照指定格式输出每七天的消费平均数)
摘要： Hive实现按照指定格式输出每七天的消费平均数 数据准备 2018/6/1,10 2018/6/2,11 2018/6/3,11 2018/6/4,12 2018/6/5,14 2018/6/6,15 2018/6/7,13 2018/6/8,37 2018/6/9,18 2018/6/10,19 阅读全文
posted @ 2019-12-23 20:15 Xiaohu_BigData 阅读(1776) 评论(1) 推荐(2) 编辑
Week08_day01 (Hive实现WordCount计数)
摘要： Hive实现WordCount计数 在没学习Hive之前，我们学习MapReduce去实现WordCount计数的时候，就要去编写80多行的java代码，现在我们学习了Hive，我们只需要一行Sql语句就可以实现。 准备数据 在hive中创建表 使用本地导入的命令进行导入数据 select 查看一下 阅读全文
posted @ 2019-12-23 19:44 Xiaohu_BigData 阅读(475) 评论(0) 推荐(0) 编辑