摘要: 前面 FLink 的文章中我们已经介绍了说 Flink 已经有很多自带的 Connector。 1、《从0到1学习Flink》—— Data Source 介绍 2、《从0到1学习Flink》—— Data Sink 介绍 其中包括了 Source 和 Sink 的,后面我也讲了下如何自定义自己的 阅读全文
posted @ 2019-09-26 18:11 静悟生慧 阅读(6013) 评论(0) 推荐(0) 编辑
摘要: Data Sources 是什么呢?就字面意思其实就可以知道:数据来源。 Flink 做为一款流式计算框架,它可用来做批处理,即处理静态的数据集、历史的数据集; 也可以用来做流处理,即实时的处理些实时数据流,实时的产生数据流结果,只要数据源源不断的过来,Flink 就能够一直计算下去,这个 Data 阅读全文
posted @ 2019-09-26 17:54 静悟生慧 阅读(994) 评论(0) 推荐(0) 编辑
摘要: 首先 Sink 的中文释义为: 所以,对应 Data sink 意思有点把数据存储下来(落库)的意思; Source 数据源 > Compute 计算 > sink 落库 如上图,Source 就是数据的来源,中间的 Compute 其实就是 Flink 干的事情,可以做一系列的操作,操作完后就把计 阅读全文
posted @ 2019-09-26 17:31 静悟生慧 阅读(2214) 评论(0) 推荐(0) 编辑
摘要: 参考原博客: https://blog.csdn.net/weixin_44516305/article/details/90258883 1 需求分析 使用Flink对实时数据流进行实时处理,并将处理后的结果保存到Elasticsearch中,在Elasticsearch中使用IK Analyze 阅读全文
posted @ 2019-09-26 16:20 静悟生慧 阅读(4404) 评论(1) 推荐(1) 编辑