随笔- 100
文章- 0
评论- 3
阅读-
30321
随笔分类 - flink
flink中配置kafka
摘要:Flink 提供了 Apache Kafka 连接器,用于从 Kafka topic 中读取或者向其中写入数据,可提供精确一次的处理语义。 一:简单使用 1.pom <!--Flink Connector KAFKA--> <dependency> <groupId>org.apache.flink
阅读全文
Flink与mysql结合
摘要:在流式计算中,不是有时候需要和mysql进行结合做一些处理。 1.调用其他方法进行 2.更快的处理 使用guava本地缓存 对msql的操作是new对象过来 private final static RuleService ruleService = new RuleService(); final
阅读全文
全量窗口与增量窗口
摘要:全量和增量是可以共用的,这种场景还是比较常见的。 例如,分组后,先对每个组进行增量计算,然后对每个增量计算,做一个全窗口的计算。 这个时候,就需要互相结合使用了。 一:窗口函数说明 1:apply与process的区别 apply和process都是处理全量计算,但工作中正常用process。 pr
阅读全文
flink入门学习
摘要:一:为什么使用flink 1.jdk实现流式处理 package net.xdclass.app; import net.xdclass.model.VideoOrder; import java.util.Arrays; import java.util.List; import java.uti
阅读全文