spark在windows的配置

在spark-env.cmd添加一行

FOR /F %%i IN ('hadoop classpath') DO @set SPARK_DIST_CLASSPATH=%%i

修改：log4j.properties，去掉spark-shell退出的报错信息bug

log4j.logger.org.apache.spark.util.ShutdownHookManager=OFF

posted @ 2018-11-20 20:51  TIMLONG  阅读(894)  评论(0)  编辑  收藏  举报