蓝天

2023年5月8日 #

Hudi学习笔记5 - Hudi配置分析（1）

摘要： Hudi 官方配置文档：https://hudi.apache.org/docs/configurations，从源码分析可以看到配置项 hoodie.payload.ordering.field 已经废弃，取而代之的是 hoodie.datasource.write.precombine.fiel 阅读全文

posted @ 2023-05-08 15:49 #蓝天 阅读(255) 评论(0) 推荐(0) 编辑

Hudi学习笔记4 - Hudi配置之Spark配置

摘要： Spark Datasource Configs 读配置 |配置项|是否必须|默认值|配置说明| |:-|:-|:-|:-| |as.of.instant|Y|N/A|0.9.0 版本新增，时间旅行查询从哪儿开始，有两种格式的值：yyyyMMddHHmmss 和 yyyy-MM-dd HH:mm:s 阅读全文

posted @ 2023-05-08 15:42 #蓝天 阅读(190) 评论(0) 推荐(0) 编辑

Hudi学习笔记2 - Hudi配置之FlinkSQL配置

摘要： Flink Sql Configs |配置项|是否必须|默认值|配置说明| |:-|:-|:-|:-| |path|Y|N/A|Hudi表的 base path，如果不存在会创建，否则应是一个已初始化成功的 hudi 表| |read.end-commit|Y|N/A|| |read.start-c 阅读全文

posted @ 2023-05-08 15:40 #蓝天 阅读(270) 评论(0) 推荐(0) 编辑

导航