随笔分类 - flink
摘要：一、状态编程 Flink 内置的很多算子，数据源 source，数据存储 sink 都是有状态的，流中的数据都是 buffer records，会保存一定的元素或者元数据。例如 : ProcessWindowFunction会缓存输入流的数据，ProcessFunction 会保存设置的定时器信息等
阅读全文
摘要：一、Flink中的window 1，window简述 window 是一种切割无限数据为有限块进行处理的手段。Window 是无限数据流处理的核心，Window 将一个无限的 stream 拆分成有限大小的”buckets”桶，我们可以在这些桶上做计算操作。 2，window类型 window可分为
阅读全文
摘要：一、Environment 1，getExecutionEnvironment getExecutionEnvironment会根据查询运行的方式决定返回什么样的运行环境，是最常用的一种创建执行环境的方式。 2，createLocalEnvironment 返回本地执行环境，需要在调用时指定默认的并
阅读全文
摘要：一、简介 Apache Flink是一个框架和分布式处理引擎，用于对无界和有界数据流进行有状态计算。Flink被设计在所有常见的集群环境中运行，以内存执行速度和任意规模来执行计算。 1，事件驱动型(Event-driven) 事件驱动型应用是一类具有状态的应用，它从一个或多个事件流提取数据，并根据到
阅读全文
