会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
黑水滴
博客园
首页
新随笔
联系
管理
订阅
2024年5月17日
Flink同步kafka到iceberg数据延迟,两个checkpoint后才可查询
摘要: 一、问题描述 用户配置了高级参数很多,观察kafka增量数据不多,flink负载不高情况下两个checkpoint后才可查询到数据。 排查时hdfs有数据文件产生,但是mainfast文件中最新快照id没变化。 二、原因 经腾讯排查,用户参数指定高级参数execution.checkpointing
阅读全文
posted @ 2024-05-17 14:45 黑水滴
阅读(38)
评论(0)
推荐(0)
编辑
公告