2023年4月1日

摘要： Flink 提供了 Apache Kafka 连接器，用于从 Kafka topic 中读取或者向其中写入数据，可提供精确一次的处理语义。一：简单使用 1.pom  <dependency> <groupId>org.apache.flink 阅读全文

posted @ 2023-04-01 17:20 曹军阅读(943) 评论(0) 推荐(0) 编辑

Flink与mysql结合

摘要：在流式计算中，不是有时候需要和mysql进行结合做一些处理。 1.调用其他方法进行 2.更快的处理使用guava本地缓存对msql的操作是new对象过来 private final static RuleService ruleService = new RuleService(); final 阅读全文

posted @ 2023-04-01 16:21 曹军阅读(303) 评论(0) 推荐(0) 编辑

全量窗口与增量窗口

摘要：全量和增量是可以共用的，这种场景还是比较常见的。例如，分组后，先对每个组进行增量计算，然后对每个增量计算，做一个全窗口的计算。这个时候，就需要互相结合使用了。一：窗口函数说明 1：apply与process的区别 apply和process都是处理全量计算，但工作中正常用process。 pr 阅读全文

posted @ 2023-04-01 16:00 曹军阅读(46) 评论(0) 推荐(0) 编辑

公告