关注我,每天一篇大数据开发面试文章,挺进大厂!2021年全套大数据面试题开始更新!
摘要: 部署方式 一般来讲有三种方式: Local Standalone Flink On Yarn/Mesos/K8s… 单机模式 参考上一篇Flink从入门到放弃(入门篇2)-本地环境搭建&构建第一个Flink应用 Standalone模式部署 我们基于CentOS7虚拟机搭建一个3个节点的集群: 角色 阅读全文
posted @ 2019-04-21 21:27 王知无 阅读(13475) 评论(0) 推荐(0) 编辑
摘要: 分布式缓存 Flink提供了一个分布式缓存,类似于hadoop,可以使用户在并行函数中很方便的读取本地文件,并把它放在taskmanager节点中,防止task重复拉取。 此缓存的工作机制如下:程序注册一个文件或者目录(本地或者远程文件系统,例如hdfs或者s3),通过ExecutionEnviro 阅读全文
posted @ 2019-04-21 21:27 王知无 阅读(196) 评论(0) 推荐(0) 编辑
摘要: 戳更多文章: 1-Flink入门 2-本地环境搭建&构建第一个Flink应用 3-DataSet API 4-DataSteam API 5-集群部署 6-分布式缓存 7-重启策略 8-Flink中的窗口 9-Flink中的Time Flink时间戳和水印 Broadcast广播变量 FlinkTa 阅读全文
posted @ 2019-04-21 21:24 王知无 阅读(879) 评论(0) 推荐(0) 编辑