2018年4月21日
spark查看stage和tasks信息
摘要： spark提供了web-ui接口、外部命令等多种方法监视spark程序的执行状态。利用spark的监视功能，可以方便的查看spark应用程序执行的状态，具体包括：1）stage和tasks列表信息 2）RDD大小和内存使用情况 3）环境信息 4）executors信息。 1.web-ui 接口 可以 阅读全文
posted @ 2018-04-21 21:21 南宫轩诺 阅读(3038) 评论(0) 推荐(1) 编辑