Flink 历史服务器配置

本文将历史服务器的日志信息保存到Hadoop 的 HDFS上,也可选择保存到本地磁盘上。

1.在HDFS上创建保存日志的文件夹

hadoop fs -mkdir -p /logs/flink-job

2.修改flink配置文件,添加历史服务器相关配置

vi /usr/flink/flink-1.18.0/conf/flink-conf.yaml
jobmanager.archive.fs.dir: hdfs://192.168.58.130:8020/logs/flink-job
historyserver.web.address: 192.168.58.130
historyserver.web.port: 8082
historyserver.archive.fs.dir: hdfs://192.168.58.130:8020/logs/flink-job
historyserver.archive.fs.refresh-interval: 5000

3.启动历史服务器

/usr/flink/flink-1.18.0/bin/historyserver.sh start

4.查看

在浏览器地址栏输入:http://192.168.58.130:8082 查看已经停止的 job 的统计信息

4.停止历史服务器

/usr/flink/flink-1.18.0/bin/historyserver.sh stop
posted @ 2024-01-18 17:07  SpringCore  阅读(154)  评论(0编辑  收藏  举报