随笔分类 -  大数据 / Flink实时计算

摘要：？？？ 阅读全文

摘要：下载Flink：访问Flink的官方网站（https://flink.apache.org/），在下载页面找到适合你操作系统的预编译二进制包。选择与你的操作系统和版本相对应的下载链接，点击下载。 解压二进制包：下载完成后，将二进制包解压到你想要安装Flink的目录中。你可以使用命令行工具（如tar命 阅读全文

摘要：https://flink.apache.org/zh/ Flink（Apache Flink）是一个开源的流处理和批处理框架，旨在处理大规模的数据流和批处理任务。它提供了高效、可扩展和容错的数据处理能力，适用于各种数据处理场景。 以下是Flink的一些关键概念： 流（Stream）：Flink以数 阅读全文

摘要：定义： Kafka是一种高吞吐量的分布式发布订阅消息系统，一款开源的分布式流处理平台，可以处理高吞吐量的实时数据流。 它主要用于构建实时流数据管道和可靠的数据流处理应用程序，能够处理海量的流数据，支持水平扩展和高可用性部署。 Kafka的核心抽象是“topic”、“partition”、“offse 阅读全文

摘要：Flink是一种基于流数据流式处理引擎。与批处理不同，它的主要思想是数据流的概念，它可以被视为一系列连续的事件或记录，它们按照发生的时间顺序进行处理，而不是被分成离散的块进行处理。Flink可以接收无限数据流并实时处理它们，它的流式处理支持无限的数据流输入和输出，并且可以动态地对数据流进行处理和修改 阅读全文