03 2021 档案
发表于 2021-03-26 19:35阅读:624评论:0推荐:0
摘要:1.添加Redis依赖包 <dependency> <groupId>redis.clients</groupId> <artifactId>jedis</artifactId> <version>3.3.0</version> </dependency> 2.RedisUtil实现代码 impor
阅读全文 »
发表于 2021-03-05 19:08阅读:3095评论:0推荐:0
摘要:Sink有下沉的意思,在Flink中所谓的Sink其实可以表示为将数据存储起来的意思,也可以将范围扩大,表示将处理完的数据发送到指定的存储系统的输出操作. 之前我们一直在使用的print方法其实就是一种Sink public DataStreamSink<T> print(String sinkId
阅读全文 »
发表于 2021-03-05 18:56阅读:184评论:0推荐:1
摘要:#Kafka #!/bin/bash case $1 in "start"){ for i in hadoop102 hadoop103 hadoop104 do echo " 启动 $i Kafka " ssh $i "/opt/module/kafka/bin/kafka-server-star
阅读全文 »
发表于 2021-03-04 14:54阅读:3697评论:0推荐:0
摘要:with...as...也叫做子查询部分,语句允许hive定义一个sql片段,供整个sql使用 简介 with...as...需要定义一个sql片段,会将这个片段产生的结果集保存在内存中, 后续的sql均可以访问这个结果集和,作用与视图或临时表类似. 语法限制 with...as...必须和其他sq
阅读全文 »
发表于 2021-03-02 21:36阅读:836评论:0推荐:0
摘要:##1)列转行及相关函数说明: Split(str, separator):将字符串按照后面的分隔符切割,转换成字符array。 EXPLODE(col):将hive一列中复杂的array或者map结构拆分成多行。 ##2)语法 lateral view udtf(expression) table
阅读全文 »