摘要: 1. 写在前面 Flink被誉为第四代大数据计算引擎组件,即可以用作基于离线分布式计算,也可以应用于实时计算。Flink可以自己搭建集群模式已提供为庞大数据的计算。但在实际应用中。都是计算hdfs上的数据文件,所以更多的建立在基于hadoop集群,而hadoop集群的资源调度组件为yarn,所以Fl 阅读全文
posted @ 2019-03-20 20:42 技术即艺术 阅读(7314) 评论(0) 推荐(0) 编辑
摘要: 1. 写在前面 Flink被誉为第四代大数据计算引擎组件,即可以用作基于离线分布式计算,也可以应用于实时计算。Flink的核心是转化为流进行计算。Flink三个核心:Source,Transformation,Sink。其中Source即为Flink计算的数据源,Transformation即为进行 阅读全文
posted @ 2019-03-20 20:18 技术即艺术 阅读(11943) 评论(3) 推荐(2) 编辑