centos7安装spark集群

安装前准备：

1.3台主机

2.安装jdk

3.免密登陆

开始安装spark

1.解压安装包

tar -zxvf spark-2.4.5-bin-hadoop2.7.tgz

2.修改配置文件

cd conf
cp spark-env.sh.template spark-env.sh
cp slaves.template slaves

修改spark-env.sh 追加

export JAVA_HOME=/root/jdk1.8.0_151

修改slaves

spark1
spark2
spark3

 3.启动

sbin/start-all.sh

http://spark1:8080/ 查看是否成功