【Windows】Spark安装

Spark的安装前提:

  • JDK安装
  • Hadoop安装
  • Scala安装

前面我们已经写过JDK8和Hadoop3.3.1的安装教程。本文我们就安装Scala(2.11.12),Spark(2.4.7)进行讲解。

Scala安装

官网下载地址:https://downloads.lightbend.com/scala/2.11.12/scala-2.11.12.msi

百度网盘:https://pan.baidu.com/s/1Qiy1aEndKn_Xs-zSSLaWIA?pwd=yyds

本地点击msi文件安装,安装目录:D:\softinstall\bigdata\scala

设置环境变量 %SCALA_HOME%

环境变量Path添加条目%SCALA_HOME%\bin

验证Scala是否安装成功

打开一个新的cmd窗口,输入scala:

可以看到Scala安装成功。

安装Spark

官网下载地址:https://archive.apache.org/dist/spark/spark-2.4.7/spark-2.4.7-bin-hadoop2.7.tgz

百度网盘:https://pan.baidu.com/s/1VyVLwnSvdMzSocj37xlErQ?pwd=yyds

本地解压spark文件,目录为 D:\softinstall\bigdata\spark

设置环境变量 %SPARK_HOME%

环境变量Path添加条目%SPARK_HOME%\bin

验证Spark是否安装成功

开启一个新的cmd窗口。

输入:spark-shell

显示上面的正常运行界面,表示本地的spark环境已搭建完成!

 

posted @   残城碎梦  阅读(97)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 阿里最新开源QwQ-32B,效果媲美deepseek-r1满血版,部署成本又又又降低了!
· 单线程的Redis速度为什么快?
· SQL Server 2025 AI相关能力初探
· AI编程工具终极对决:字节Trae VS Cursor,谁才是开发者新宠?
· 展开说说关于C#中ORM框架的用法!
历史上的今天:
2021-12-14 谈谈MySQL中的重做日志,回滚日志,以及二进制日志的区别及各自作用
2021-12-14 【Zookeeper篇】ZooKeeper面试那些事儿
2021-12-14 Spring,SpringMVC,SpringBoot,SpringCloud有什么区别和联系?
2021-12-14 面试官:Spring AOP有哪些通知类型,它们的执行顺序是怎样的?
2021-12-14 【数据库篇】谈谈MySQL主从复制的原理(未完)
2021-12-14 盘点MySQL主从复制,在面试中能被问什么?
2021-12-14 面试官:怎么保证缓存和数据库一致性
点击右上角即可分享
微信分享提示