随笔分类 - Flink
摘要:一.IDEA开发环境 1.pom文件设置 2.flink开发流程 Flink具有特殊类DataSet并DataStream在程序中表示数据。您可以将它们视为可以包含重复项的不可变数据集合。在DataSet数据有限的情况下,对于一个DataStream元素的数量可以是无界的。 这些集合在某些关键方面与
阅读全文
摘要:一. Flink的下载 安装包下载地址:http://flink.apache.org/downloads.html ,选择对应Hadoop的Flink版本下载 Flink 有三种部署模式,分别是 Local、Standalone Cluster 和 Yarn Cluster。 二. Local模式
阅读全文
摘要:一. Flink的引入 这几年大数据的飞速发展,出现了很多热门的开源社区,其中著名的有 Hadoop、Storm,以及后来的 Spark,他们都有着各自专注的应用场景。Spark 掀开了内存计算的先河,也以内存为赌注,赢得了内存计算的飞速发展。Spark 的火热或多或少的掩盖了其他分布式计算的系统身
阅读全文