Spark-Web UI页面(默认端口: 4040)
访问Web UI页面的前提:
启动Spark安装目录下sbin/start-all.sh 。
jps可以看到Master和Worker。
1、Spark的Master页面
http://master:8080/
2、Spark的Worker页面
http://master:8081/
3、Spark的Job页面(只有任务运行过程中可以查看该页面)
http://master:4040/
调用Jar包时如果日志输出:Successfully started service 'SparkUI' on port 4040.说明该页面可以访问了。
注意:spark程序运行时需要设置Master为: spark://<Master>:7077,否则在页面无法看到job的执行情况。
Job WebUI页面详解:https://blog.csdn.net/qq_46893497/article/details/134788500
本文来自博客园,作者:业余砖家,转载请注明原文链接:https://www.cnblogs.com/yeyuzhuanjia/p/18204600