2022 年 6月 2 日随笔档案 - CHANG_09

2022年6月2日

摘要：原文：Hive3.1.2源码编译兼容Spark3.1.2 Hive on Spark - D-Arlin - 博客园 (cnblogs.com) 在使用hive3.1.2和spark3.1.2配置hive on spark的时候，发现官方下载的hive3.1.2和spark3.1.2不兼容，hive 阅读全文

posted @ 2022-06-02 17:07 CHANG_09 阅读(2050) 评论(0) 推荐(0) 编辑

从Github拉取项目到本地

摘要： 1、创建一个文件夹，用来放你要拉取的项目。 projects 2、然后在文件夹空白处右击，点击Gti Bash Here，进入终端。 3、打开终端后，输入命令 “git clone 你的项目地址"，项目地址可以直接复制下来。阅读全文

posted @ 2022-06-02 17:06 CHANG_09 阅读(415) 评论(0) 推荐(0) 编辑

UDTF 如何使用

摘要：阅读全文

posted @ 2022-06-02 10:10 CHANG_09 阅读(33) 评论(0) 推荐(0) 编辑

Hive 常用的开窗函数

摘要： (10条消息) hive的开窗函数_Climber_XL的博客-CSDN博客_hive 开窗 Function (arg1,..., argn) OVER ([PARTITION BY <...>] [ORDER BY <....>] [<window_expression>]) -- 聚合开窗函数阅读全文

posted @ 2022-06-02 10:05 CHANG_09 阅读(2456) 评论(0) 推荐(1) 编辑

Spark常用的算子

摘要： Map FlatMap groupBy filter sample 根据指定的规则从数据集中抽取数据 val dataRDD = sparkContext.makeRDD(List( 1,2,3,4),1)// 抽取数据不放回（伯努利算法）// 伯努利算法：又叫 0、1 分布。例如扔硬币，要么正面，阅读全文

posted @ 2022-06-02 10:02 CHANG_09 阅读(60) 评论(0) 推荐(0) 编辑

CHANG_09

公告