2019年3月30日
在spark中启动standalone集群模式cluster问题
摘要： spark-submit --master spark://master:7077 --deploy-mode cluster --driver-cores 2 --driver-memory 100M --class org.apache.spark.examples.SparkPi /home/ 阅读全文
posted @ 2019-03-30 16:38 pursue330 阅读(198) 评论(0) 推荐(0) 编辑
spark配置文件和执行部分代码
摘要： export SPARK_DAEMON_JAVA_OPTS="-Dspark.deploy.recoveryMode=ZOOKEEPER-Dspark.deploy.zookeeper.url=zk1,zk2,zk3-Dspark.deploy.zookeeper.dir=/spark"1.在 ma 阅读全文
posted @ 2019-03-30 15:22 pursue330 阅读(1317) 评论(0) 推荐(0) 编辑