寒假学习进度3

今天继续spark的学习，今天完成了Standalone 模式的配置和在windows上的运行

首先是Standalone 模式

更改spark目录下conf文件中的salves文件，添加内容

 

 

 

 更改spark目录下conf文件中的spark-env文件，添加内容

export JAVA_HOME=/opt/module/jdk1.8.0_144

SPARK_MASTER_HOST=hadoop102

SPARK_MASTER_PORT=8020

 

启动spark sbin/start - all.sh

 

 

查看是否启动

 

 测试

 

 

 

 

 

 windows环境下spark运行

解压spark，在bin目录下下启动

 

测试