sp的配置安装
下载好sp并解压,在进行配置进入spark的conf目录下, 这里是spark所有的配置文件目录
配置spark-env.sh
添加
# 指定 JAVA Home export JAVA_HOME=/usr/java/jdk1.8.0_261-amd64 # 指定 Spark Master 地址 export SPARK_MASTER_HOST=bigdata1 export SPARK_MASTER_PORT=7077
配置slaves
添加
# 指定bigdata1既是主节点也是从节点,若不想可以删除该行。
bigdata1
bigdata2
bigdata3