大数据学习——spark安装

一主多从

1 上传压缩包

2 解压

tar -zxvf spark-1.6.2-bin-hadoop2.6.tgz

删除安装包 

rm -rf spark-1.6.2-bin-hadoop2.6.tgz

重命名

mv spark-1.6.2-bin-hadoop2.6/ spark 

3 修改配置文件

 cp spark-env.sh.template spark-env.sh
 cp slaves.template  slaves 
 vi slaves

 

 

 

vi spark-env.sh

 

4 分发给另外几台机器

5 启动

 

指定某一台

 

启动所有

 

查看进程

 

http://mini1:8080/

 

关闭集群

sbin/stop-all.sh 

 

多主多从