随笔- 100  文章- 0  评论- 3  阅读- 30321 

随笔分类 -  flink

flink中配置kafka
摘要:Flink 提供了 Apache Kafka 连接器,用于从 Kafka topic 中读取或者向其中写入数据,可提供精确一次的处理语义。 一:简单使用 1.pom <!--Flink Connector KAFKA--> <dependency> <groupId>org.apache.flink 阅读全文
posted @ 2023-04-01 17:20 曹军 阅读(1129) 评论(0) 推荐(0) 编辑
Flink与mysql结合
摘要:在流式计算中,不是有时候需要和mysql进行结合做一些处理。 1.调用其他方法进行 2.更快的处理 使用guava本地缓存 对msql的操作是new对象过来 private final static RuleService ruleService = new RuleService(); final 阅读全文
posted @ 2023-04-01 16:21 曹军 阅读(330) 评论(0) 推荐(0) 编辑
全量窗口与增量窗口
摘要:全量和增量是可以共用的,这种场景还是比较常见的。 例如,分组后,先对每个组进行增量计算,然后对每个增量计算,做一个全窗口的计算。 这个时候,就需要互相结合使用了。 一:窗口函数说明 1:apply与process的区别 apply和process都是处理全量计算,但工作中正常用process。 pr 阅读全文
posted @ 2023-04-01 16:00 曹军 阅读(59) 评论(0) 推荐(0) 编辑
flink入门学习
摘要:一:为什么使用flink 1.jdk实现流式处理 package net.xdclass.app; import net.xdclass.model.VideoOrder; import java.util.Arrays; import java.util.List; import java.uti 阅读全文
posted @ 2022-10-21 23:20 曹军 阅读(153) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示