Flink Metrics监控
摘要：Flink Metrics监控参考： Flink Metrics监控与 RestApi https://ci.apache.org/projects/flink/flink-docs-release-1.12/zh/ops/metrics.html
阅读全文
posted @ 2021-06-29 15:14
06 2021 档案
service to hadoop01/hadoop01:8020 Datanode denied communication with namenode because the host is not in the include-list
摘要：Hadoop新增节点报错： 2021-06-28 16:02:12,489 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Block pool BP-433041383-192.168.10.249-1494331993586 (Data
阅读全文
posted @ 2021-06-28 16:27
Hadoop和HBASE对应兼容版本
摘要：参考官网： https://hbase.apache.org/book.html#configuration
阅读全文
posted @ 2021-06-28 11:08
Flink SQL CDC中如何定义watermark和计算列
摘要：官网示例： -- use the existing TIMESTAMP(3) field in schema as the rowtime attribute CREATE TABLE MyTable ( ts_field TIMESTAMP(3), WATERMARK FOR ts_field A
阅读全文
posted @ 2021-06-25 18:02
流计算 Oceanus SQL 开发指南
摘要：流计算 Oceanus SQL 开发指南
阅读全文
posted @ 2021-06-18 10:18
Flume引用第三方jar包，进行jar包隔离
摘要：引用第三方jar包 不必放在flume的lib目录下，参考http://flume.apache.org/FlumeUserGuide.html#installing-third-party-plugins 在flume目录下新建plugins.d目录，此目录下每个插件单独一个目录，每个插件目录下可
阅读全文
posted @ 2021-06-17 17:35
flume自定义拦截器解决数据漂移问题及切分日志日期
摘要：flume中的数据漂移问题解决： 在flume-kafka-flume中 flume1：taildir source -- kafka channel flume2：kafka source -- File channel -- HDFS sink 第二层flume的kafka source上挂上一
阅读全文
posted @ 2021-06-17 17:31
Flink SQL web平台搭建
摘要：待续。。。 参考： https://github.com/zhp8341/flink-streaming-platform-web 或者zeppeline
阅读全文
posted @ 2021-06-16 16:15
Flink SQL窗口函数详解
摘要：参考： https://segmentfault.com/a/1190000023296719 首页 > 实时计算Flink版 > Blink独享/共享集群（原产品线） > Flink SQL参考 > 窗口函数 >
阅读全文
posted @ 2021-06-01 16:51
