2019年6月3日

flink watermark介绍

摘要: 转发请注明原创地址 http://www.cnblogs.com/dongxiao-yang/p/7610412.html 一 概念 watermark是flink为了处理eventTime窗口计算提出的一种机制,本质上也是一种时间戳,由flink souce或者自定义的watermark生成器按照 阅读全文

posted @ 2019-06-03 20:43 cxhfuujust 阅读(1252) 评论(0) 推荐(0) 编辑

flink中对于window和watermark的一些理解

摘要: 首先window的时间范围是一个自然时间范围,比如你定义了一个 TumblingEventTimeWindows.of(Time.seconds(3))窗口,那么会生成类似如下的窗口(左闭右开): [2018-03-03 03:30:00,2018-03-03 03:30:03) [2018-03- 阅读全文

posted @ 2019-06-03 17:48 cxhfuujust 阅读(829) 评论(0) 推荐(0) 编辑

Apache Flink:详细入门

摘要: Apache Flink是一个面向分布式数据流处理和批量数据处理的开源计算平台,它能够基于同一个Flink运行时(Flink Runtime),提供支持流处理和批处理两种类型应用的功能。现有的开源计算方案,会把流处理和批处理作为两种不同的应用类型,因为他们它们所提供的SLA是完全不相同的:流处理一般 阅读全文

posted @ 2019-06-03 14:37 cxhfuujust 阅读(1364) 评论(0) 推荐(0) 编辑

导航