Flink 历史服务器配置

本文将历史服务器的日志信息保存到Hadoop 的 HDFS上,也可选择保存到本地磁盘上。

1.在HDFS上创建保存日志的文件夹

hadoop fs -mkdir -p /logs/flink-job

2.修改flink配置文件,添加历史服务器相关配置

vi /usr/flink/flink-1.18.0/conf/flink-conf.yaml
jobmanager.archive.fs.dir: hdfs://192.168.58.130:8020/logs/flink-job
historyserver.web.address: 192.168.58.130
historyserver.web.port: 8082
historyserver.archive.fs.dir: hdfs://192.168.58.130:8020/logs/flink-job
historyserver.archive.fs.refresh-interval: 5000

3.启动历史服务器

/usr/flink/flink-1.18.0/bin/historyserver.sh start

4.查看

在浏览器地址栏输入:http://192.168.58.130:8082 查看已经停止的 job 的统计信息

4.停止历史服务器

/usr/flink/flink-1.18.0/bin/historyserver.sh stop

作者:奇

出处:https://www.cnblogs.com/fanqisoft/p/17972940

版权:本作品采用「本文版权归作者和博客园共有,欢迎转载,但必须给出原文链接,并保留此段声明,否则保留追究法律责任的权利。」许可协议进行许可。

posted @   SpringCore  阅读(202)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 阿里最新开源QwQ-32B,效果媲美deepseek-r1满血版,部署成本又又又降低了!
· 单线程的Redis速度为什么快?
· SQL Server 2025 AI相关能力初探
· AI编程工具终极对决:字节Trae VS Cursor,谁才是开发者新宠?
· 展开说说关于C#中ORM框架的用法!
more_horiz
keyboard_arrow_up light_mode palette
选择主题
点击右上角即可分享
微信分享提示