摘要: FE 参数分为动态参数和静态参数。动态参数可通过 SQL 命令进行在线配置和调整,方便快捷。 静态参数必须在 FE 配置文件 fe.conf 中进行配置和调整。调整完成后,需要重启 FE 使变更生效。 参数是否为动态参数可通过 ADMIN SHOW CONFIG 返回结果中的 IsMutable 列 阅读全文
posted @ 2023-06-14 18:37 再见傅里叶 阅读(288) 评论(0) 推荐(0) 编辑
摘要: spark streaming 的 checkpoint 仅仅是针对 driver 的故障恢复做了数据和元数据的 checkpoint。 而 flink 的checkpoint 机制要复杂很多,它采用的是轻量级的分布式快照,实现了每个算子的快照,及流动中的数据的快照。 阅读全文
posted @ 2023-06-14 15:48 再见傅里叶 阅读(139) 评论(0) 推荐(0) 编辑