随笔分类 -  课程 / 大数据 / Flink

摘要:(二)DataStream API DataStream是Flink编写流处理作业的API。我们前面说过一个完整的Flink处理程序应该包含三部分:数据源(Source)、转换操作(Transformation)、结果接收(Sink)。下面我们从这三部分来看DataStream API。 (五)结果 阅读全文
posted @ 2023-07-04 11:56 ImreW 阅读(42) 评论(0) 推荐(0) 编辑
摘要:(二)DataStream API DataStream是Flink编写流处理作业的API。我们前面说过一个完整的Flink处理程序应该包含三部分:数据源(Source)、转换操作(Transformation)、结果接收(Sink)。下面我们从这三部分来看DataStream API。 addSo 阅读全文
posted @ 2023-07-04 11:51 ImreW 阅读(172) 评论(0) 推荐(0) 编辑
摘要:Flink 的 DataSet 和 DataStream 的 API,并模拟了实时计算的场景。 说好的流批一体呢 现状 Flink 很重要的一个特点是“流批一体”,然而事实上 Flink 并没有完全做到所谓的“流批一体”,即编写一套代码,可以同时支持流式计算场景和批量计算的场景。目前截止 1.10 阅读全文
posted @ 2023-07-04 11:34 ImreW 阅读(14) 评论(0) 推荐(0) 编辑
摘要:(一)Flink的并发执行 ,一个Flink程序可以由不同的task(如:transformations/opterators,data sources及data sinks等)组成,一个task会分发到多个并发实例中运行,并且每个并发实例处理task的部分输入数据集。一个task的并发实例数叫做p 阅读全文
posted @ 2023-07-03 15:35 ImreW 阅读(253) 评论(0) 推荐(0) 编辑
摘要:(二)DataStream API DataStream是Flink编写流处理作业的API。我们前面说过一个完整的Flink处理程序应该包含三部分:数据源(Source)、转换操作(Transformation)、结果接收(Sink)。下面我们从这三部分来看DataStream API。 (四)数据 阅读全文
posted @ 2023-07-03 10:19 ImreW 阅读(24) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示