06 2020 档案

摘要:1.前言 本文主要基于实践过程中遇到的一系列问题,来详细说明Flink的状态后端是什么样的执行机制,以理解自定义函数应该怎么写比较合理,避免踩坑。 内容是基于Flink SQL的使用,主要说明自定义聚合函数的一些性能问题,状态后端是rocksdb。 2.Flink State https://ci. 阅读全文
posted @ 2020-06-28 11:09 dark_saber 阅读(2073) 评论(0) 推荐(0) 编辑
摘要:1.前言 对于做实时计算的朋友来说,资源设置都是一个比较麻烦的问题。实时计算不同于离线计算,它的任务都是并行的,启动就会一直占用集群资源,如果资源设置的过多会造成极大的浪费,设置的过少任务会不断发生failover。这里说的资源主要指的就是内存资源,所以本文对Flink的内存设置提供一些思路,尤其是 阅读全文
posted @ 2020-06-06 16:37 dark_saber 阅读(16923) 评论(0) 推荐(4) 编辑

点击右上角即可分享
微信分享提示