随笔分类 - HIve
摘要:之前搭的环境,今天起来后进入hive报错如图 这个错误其实是 hive 的元数据找不到了,可以启动下元数据服务即可。 解决方式 cd /opt/module/hive/bin./hive --service metastore &
阅读全文
摘要:数据准备 cookie1,2015-04-10 10:00:02,url2 cookie1,2015-04-10 10:00:00,url1 cookie1,2015-04-10 10:03:04,1url3 cookie1,2015-04-10 10:50:05,url6 cookie1,2015
阅读全文
摘要:今天介绍几个序列函数,NTILE,ROW_NUMBER,RANK,DENSE_RANK,其中 ROW_NUMBER 是现在工作中较常用到的函数,下面会一一解释各自的用途。 数据准备 cookie1,2015-04-10,1 cookie1,2015-04-11,5 cookie1,2015-04-1
阅读全文
摘要:窗口函数可以对数据进行分组,将数据按组分成一个窗口。利用窗口函数可以对窗口内的数据进行排序,聚合操作,还可以通过window子句让窗口上下滑动,非常灵活。 数据准备 create table cookie_sum ( id varchar(5), createtime varchar(20), pv
阅读全文
摘要:一、时间函数 1、date_format:格式化时间 select date_format('2021-05-20','yyyyMMdd') yyyymmdd 注意写法:date_format('2021-05-20','yyyyMMdd') dd 小写 MM 大写 2、日期加减 select '2
阅读全文
摘要:1、什么是Hive 1、hive简介 Hive:由Facebook开源用于解决海量结构化日志的数据统计工具。 Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。 2 Hive本质:将HQL转化成MapReduce程序 (1)Hive处理的数据存
阅读全文