摘要: 【安装前的环境准备】 Hadoop:2.6.1Java:jdk-1.7.0Spark: spark-1.6.0-bin-hadoop2.6.tgzScala: scala-2.11.4.tgz虚拟机:host01,host02,host03; 其中host01是spark集群的主节点master, 阅读全文
posted @ 2017-12-20 23:52 shayzhang 阅读(288) 评论(0) 推荐(0) 编辑
摘要: 监控Spark Application的运行 官方文档: http://spark.apache.org/docs/latest/monitoring.html 1.1 监控方式 Driver Programme WEB UI (Port: 4040) * 每一个driver program (更具 阅读全文
posted @ 2017-12-20 00:52 shayzhang 阅读(1522) 评论(0) 推荐(0) 编辑