2023 年 5月 6 日随笔档案 - Flink菜鸟

2023年5月6日

摘要：这段时间开始调研使用 StarRocks 做准实时数据仓库：flink cdc 实时同步数据到 StarRocks，然后在 StarRocks 中做分层计算，直接把 StarRocks 中的 ADS 层提供给 BI 查询。架构如下：由于用到的表比较多，不能用 Flink SQL 给每个表都做个 C 阅读全文

posted @ 2023-05-06 16:35 Flink菜鸟阅读(5316) 评论(3) 推荐(1) 编辑

Flink 1.17 自定义 MySQL Catalog

摘要： Catalog 类型以下内容来自官网： Hive Catalog 支持Flink 元数据的持久化存储，以前一直用 Hive Catalog 存，偶尔需要用的时候把 Hive Catalog 开启（需启动 hive metastore 和 hiveserver2，还要启动 Hadoop），大部分时候阅读全文

posted @ 2023-05-06 16:34 Flink菜鸟阅读(3093) 评论(0) 推荐(0) 编辑