随笔分类 -  Flink

摘要:Watermaker如何触发窗口计算的? 窗口计算的触发条件为:1.窗口中有数据 2.Watermaker >= 窗口的结束时间Watermaker = 当前窗口的最大的事件时间 - 最大允许的延迟时间或乱序时间也就是说只要不断有数据来,就可以保证Watermaker水位线是会一直上升/变大的,不会 阅读全文
posted @ 2021-12-06 06:38 kpwong 阅读(396) 评论(0) 推荐(0) 编辑
摘要:代码: package com.kpwong.sideoutput import com.atguigu.window.{SensorReading} import org.apache.flink.streaming.api.functions.ProcessFunction //import o 阅读全文
posted @ 2020-12-08 11:00 kpwong 阅读(1260) 评论(0) 推荐(0) 编辑
摘要:POM 文件 <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-scala_2.11</artifactId> <version>1.10.2</version> </dependency> <!-- https:/ 阅读全文
posted @ 2020-12-06 15:30 kpwong 阅读(4290) 评论(0) 推荐(0) 编辑
摘要:POM 文件依赖: <dependencies> <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-scala_2.11</artifactId> <version>1.10.2</version> </depend 阅读全文
posted @ 2020-12-06 10:32 kpwong 阅读(274) 评论(0) 推荐(0) 编辑
摘要:package com.kpwong.aiptest import org.apache.flink.streaming.api.scala.{DataStream, StreamExecutionEnvironment} import org.apache.flink.api.scala._ im 阅读全文
posted @ 2020-12-05 15:57 kpwong 阅读(666) 评论(0) 推荐(0) 编辑
摘要:POM <dependencies> <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-scala_2.11</artifactId> <version>1.10.2</version> </dependency> 阅读全文
posted @ 2020-12-05 15:16 kpwong 阅读(1686) 评论(0) 推荐(0) 编辑
摘要:package com.kpwong.aiptest import org.apache.flink.streaming.api.scala.{DataStream, StreamExecutionEnvironment} import org.apache.flink.api.scala._ ob 阅读全文
posted @ 2020-12-05 14:46 kpwong 阅读(750) 评论(0) 推荐(0) 编辑
摘要:POM 文件。 <dependencies> <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-scala_2.11</artifactId> <version>1.10.2</version> </dependen 阅读全文
posted @ 2020-12-04 09:55 kpwong 阅读(256) 评论(0) 推荐(0) 编辑
摘要:POM文件 <dependencies> <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-scala_2.11</artifactId> <version>1.10.2</version> </dependency 阅读全文
posted @ 2020-12-04 09:48 kpwong 阅读(114) 评论(0) 推荐(0) 编辑
摘要:在Flink运行完yarn 模式后,返回运行standalone模式运行时。经常会出现运行不成功情形。是因为运行完Yarn模式后在/tmp目录下会生成一个 .yarn-properties-root隐藏文件。需要把这个隐藏文件删除。程序才能在standalone模式下运行成功. 阅读全文
posted @ 2020-12-01 19:27 kpwong 阅读(321) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示