Fork me on GitHub
2021年6月18日
k8s部署spark
摘要： 1.镜像构建打包推送阿里镜像： DockerFile构建： FROM java:openjdk-8-jdk ENV hadoop_ver 2.8.2 ENV spark_ver 2.4.4 RUN mkdir -p /opt ADD hadoop-${hadoop_ver}.tar.gz /opt/ 阅读全文
posted @ 2021-06-18 17:18 是阿凯啊 阅读(1156) 评论(0) 推荐(0) 编辑
spark简单安装
摘要： spark搭建 继续使用上次搭建hadoop scala安装:https://downloads.lightbend.com/scala/2.12.12/scala-2.12.12.tgz # 解压 tar -zxvf scala-2.12.12.tgz # 配置环境变量 vi /etc/profi 阅读全文
posted @ 2021-06-18 11:34 是阿凯啊 阅读(159) 评论(0) 推荐(0) 编辑
搭建一套高可用的hadoop集群
摘要： hadoop部署 准备好三台机器，规划配置如下 linux01 10.0.0.155 NameNode DataNode NodeManager linux02 10.0.0.156 SecondaryNameNode DataNode NodeManager ResourceManager lin 阅读全文
posted @ 2021-06-18 09:24 是阿凯啊 阅读(148) 评论(0) 推荐(0) 编辑