摘要: 1.添加Redis依赖包 <dependency> <groupId>redis.clients</groupId> <artifactId>jedis</artifactId> <version>3.3.0</version> </dependency> 2.RedisUtil实现代码 impor 阅读全文
posted @ 2021-03-26 19:35 Later^^ 阅读(623) 评论(0) 推荐(0) 编辑
摘要: Sink有下沉的意思,在Flink中所谓的Sink其实可以表示为将数据存储起来的意思,也可以将范围扩大,表示将处理完的数据发送到指定的存储系统的输出操作. 之前我们一直在使用的print方法其实就是一种Sink public DataStreamSink<T> print(String sinkId 阅读全文
posted @ 2021-03-05 19:08 Later^^ 阅读(3019) 评论(0) 推荐(0) 编辑
摘要: #Kafka #!/bin/bash case $1 in "start"){ for i in hadoop102 hadoop103 hadoop104 do echo " 启动 $i Kafka " ssh $i "/opt/module/kafka/bin/kafka-server-star 阅读全文
posted @ 2021-03-05 18:56 Later^^ 阅读(183) 评论(0) 推荐(1) 编辑
摘要: with...as...也叫做子查询部分,语句允许hive定义一个sql片段,供整个sql使用 简介 with...as...需要定义一个sql片段,会将这个片段产生的结果集保存在内存中, 后续的sql均可以访问这个结果集和,作用与视图或临时表类似. 语法限制 with...as...必须和其他sq 阅读全文
posted @ 2021-03-04 14:54 Later^^ 阅读(3524) 评论(0) 推荐(0) 编辑
摘要: ##1)列转行及相关函数说明: Split(str, separator):将字符串按照后面的分隔符切割,转换成字符array。 EXPLODE(col):将hive一列中复杂的array或者map结构拆分成多行。 ##2)语法 lateral view udtf(expression) table 阅读全文
posted @ 2021-03-02 21:36 Later^^ 阅读(818) 评论(0) 推荐(0) 编辑
摘要: #1.设置GitHub账号 如果出现401等情况连接不上的,是因为网络原因,可以使用以下方式连接(推荐): 然后去GitHub上设置token。 点击生成token。 复制红框中的字符串到idea中。 点击登录。 #1.2分享工程到GitHub 来到GitHub中发现已经帮我们创建好了gitTest 阅读全文
posted @ 2021-02-28 22:35 Later^^ 阅读(732) 评论(0) 推荐(0) 编辑
摘要: #1.1配置忽略文件 问题1:为什么要忽略他们? 答:与项目的实际功能无关,不参与服务器上部署运行。把它们忽略掉能够屏蔽IDE工具之间的差异。 问题2:怎么忽略? 1)创建忽略规则文件xxxx.ignore(前缀名随便起) 这个文件的存放位置原则上在哪里都可以,为了便于让~/.gitconfig文件 阅读全文
posted @ 2021-02-28 22:23 Later^^ 阅读(137) 评论(0) 推荐(0) 编辑
摘要: 我们可以看到远程仓库中还有一个SSH的地址,因此我们也可以使用SSH进行访问。 具体操作如下: --进入当前用户的家目录 ZhangJY@MSI MINGW64 /d/MyWork/Git-Space/SH0720 (master) $ cd --删除.ssh目录 ZhangJY@MSI MINGW 阅读全文
posted @ 2021-02-28 15:44 Later^^ 阅读(229) 评论(0) 推荐(0) 编辑
摘要: 删除数据库时提示:message:Database DBname is not empty. One or more tables exist. ##解决方案1: 先删除数据库中的所有表,再删除数据库 ##解决方案2: 强制删除 drop database db_hive cascade; 阅读全文
posted @ 2021-01-24 00:13 Later^^ 阅读(394) 评论(0) 推荐(0) 编辑
摘要: nohup hiveserver2 & 阅读全文
posted @ 2021-01-19 14:54 Later^^ 阅读(1571) 评论(0) 推荐(0) 编辑