spark submit打印gc信息

在提交spark-submit时添加参数即可

                                                                                                      //这个是集群运行名称
--conf spark.driver.extraJavaOptions="-Xloggc:/tmp/gc.log -XX:+PrintGCDetails -XX:+PrintGCTimeStamps" --name "test02 "

这个gc.log在集群上不一定在那个节点上,需要自己找,然后查看

 查看日志监控:tail -f  gc.log 

 

posted @ 2018-09-30 17:16  聚云  阅读(1198)  评论(0编辑  收藏  举报