07 2022 档案
flink lookup join tps 测试 hbase mysql starrocks
摘要:流表关联时数仓 DW 层把表打宽最主要的方式,项目中使用最多的维表存储是 hbase/mysql/redis,分别在大表、小表、高性能查询三种流表关联查询场景 最近调研和使用了一段时间的 starrocks,发现使用 starrocks 做维表的存储好像也很不错,所以做这样一次测试,测试 hbase
阅读全文
Flink sql Windowing TVF 源码解析
摘要:接上篇: Flink sql Group Windows 窗口源码解析 上篇写了 Group Windows 的源码解析,Group Windows 的源码是相对好阅读的,核心处理逻辑和 Stream api 一样: Window + trigger + agg function 而 Window
阅读全文
Flink sql Windowing TVF 增加并行度引发的故事
摘要:上篇:Flink sql Group Windows 窗口源码解析 下篇:Flink sql Windowing TVF 源码解析 之前在 sqlSubmit 项目里面添加了解析 sql 文件中的参数的功能 就随手在一个 window tvf 的 sql 里面添加了设置并行度为 2 的语句 set
阅读全文