摘要：
Spark分布式集群环境搭建 一、硬件情况 三台服务器 操作系统版本：Linux version 3.10.0-693.17.1.el7.x86_64 二、软件包 Jdk-8u171-linux-x64.tar(java version 1.8.0_171) Scala-2.11.7 Spark-2 阅读全文
摘要：
1.Spark安装 1安装SCALA 1) 使用命令tar -zvxf scala-2.11.7.tgz解压该压缩包, 修改环境变量. 2) 与JDK一样，使用命令vi /etc/profile 修改环境变量的配置文件,之后使用命令 source /etc/profile，使文件修改生效。 3) 使 阅读全文
摘要：
一、系统基础环境 Centos7.4 64位系统 jdk1.8 mysql5.7.24 二、需安装的软件包 kafka_2.12-2.2.0 zookeeper-3.4.9 Python-3.6.0 （暂时不用） elasticsearch-6.2.2 scala-2.11.7 （暂时不用） spa 阅读全文