Spark-Web UI页面(默认端口: 4040)

访问Web UI页面的前提:

启动Spark安装目录下sbin/start-all.sh 。

jps可以看到Master和Worker。

1、Spark的Master页面

http://master:8080/

2、Spark的Worker页面

http://master:8081/

3、Spark的Job页面(只有任务运行过程中可以查看该页面)

http://master:4040/ 

 调用Jar包时如果日志输出:Successfully started service 'SparkUI' on port 4040.说明该页面可以访问了。

 注意:spark程序运行时需要设置Master为: spark://<Master>:7077,否则在页面无法看到job的执行情况。

 

Job WebUI页面详解:https://blog.csdn.net/qq_46893497/article/details/134788500

                                   https://blog.51cto.com/u_16099239/7295161

posted @ 2024-05-21 17:27  业余砖家  阅读(202)  评论(0编辑  收藏  举报