春
节
快
乐
2020年3月24日
Spark-Zk-ES集群环境搭建
摘要： Spark分布式集群环境搭建 一、硬件情况 三台服务器 操作系统版本：Linux version 3.10.0-693.17.1.el7.x86_64 二、软件包 Jdk-8u171-linux-x64.tar(java version 1.8.0_171) Scala-2.11.7 Spark-2 阅读全文
posted @ 2020-03-24 21:01 胡小华 阅读(443) 评论(0) 推荐(0) 编辑
备用Spark-Python集高可用ZK-Spark配置----公司使用，赞未测试
摘要： 1.Spark安装 1安装SCALA 1) 使用命令tar -zvxf scala-2.11.7.tgz解压该压缩包, 修改环境变量. 2) 与JDK一样，使用命令vi /etc/profile 修改环境变量的配置文件,之后使用命令 source /etc/profile，使文件修改生效。 3) 使 阅读全文
posted @ 2020-03-24 20:55 胡小华 阅读(191) 评论(0) 推荐(0) 编辑
自用单机测试 Kafka---ZK---ES----安装及配置说明
摘要： 一、系统基础环境 Centos7.4 64位系统 jdk1.8 mysql5.7.24 二、需安装的软件包 kafka_2.12-2.2.0 zookeeper-3.4.9 Python-3.6.0 （暂时不用） elasticsearch-6.2.2 scala-2.11.7 （暂时不用） spa 阅读全文
posted @ 2020-03-24 20:38 胡小华 阅读(758) 评论(0) 推荐(0) 编辑