2022年3月18日
DataStream常用算子
摘要： DataStream常用算子 在 Flink 应用程序中，无论你的应用程序是批程序，还是流程序，都是上图这种模型，有数据源（source），有数据下游（sink），我们写的应用程序多是对数据源过来的数据做一系列操作，总结如下。 Source: 数据源，Flink 在流处理和批处理上的 source 阅读全文
posted @ 2022-03-18 23:56 赤兔胭脂小吕布 阅读(105) 评论(0) 推荐(0) 编辑
Flink Source:数据源
摘要： Flink Source:数据源 Flink 在流处理和批处理上的 source 大概有 4 类： 1、基于本地集合的 source、 2、基于文件的 source、 3、基于网络套接字的 source、 4、自定义的 source。自定义的 source 常见的有 Apache kafka、Ama 阅读全文
posted @ 2022-03-18 22:16 赤兔胭脂小吕布 阅读(150) 评论(0) 推荐(0) 编辑
Flink WordCount、打开Flink的日志输出、Spark WordCount 和 Flink WordCount 的运行流程对比
摘要： Flink WordCount 导入依赖 <properties> <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding> <flink.version>1.11.2</flink.version> <scala.bina 阅读全文
posted @ 2022-03-18 21:19 赤兔胭脂小吕布 阅读(570) 评论(0) 推荐(0) 编辑
Flink简介
摘要： Flink 相当于是对spark的一个延伸 我们在学习一个框架的时候，要记住关注GitHub GitHub: Where the world builds software · GitHub 和这个框架的官网 流处理和批处理的区别 无界流和有界流 Flink 提出无界流和有界流的目的是因为Flink 阅读全文
posted @ 2022-03-18 20:03 赤兔胭脂小吕布 阅读(78) 评论(0) 推荐(0) 编辑