【Windows】Spark安装
Spark的安装前提:
- JDK安装
- Hadoop安装
- Scala安装
前面我们已经写过JDK8和Hadoop3.3.1的安装教程。本文我们就安装Scala(2.11.12),Spark(2.4.7)进行讲解。
Scala安装
官网下载地址:https://downloads.lightbend.com/scala/2.11.12/scala-2.11.12.msi
百度网盘:https://pan.baidu.com/s/1Qiy1aEndKn_Xs-zSSLaWIA?pwd=yyds
本地点击msi文件安装,安装目录:D:\softinstall\bigdata\scala
设置环境变量 %SCALA_HOME%
环境变量Path添加条目%SCALA_HOME%\bin
验证Scala是否安装成功
打开一个新的cmd窗口,输入scala:
可以看到Scala安装成功。
安装Spark
官网下载地址:https://archive.apache.org/dist/spark/spark-2.4.7/spark-2.4.7-bin-hadoop2.7.tgz
百度网盘:https://pan.baidu.com/s/1VyVLwnSvdMzSocj37xlErQ?pwd=yyds
本地解压spark文件,目录为 D:\softinstall\bigdata\spark
设置环境变量 %SPARK_HOME%
环境变量Path添加条目%SPARK_HOME%\bin
验证Spark是否安装成功
开启一个新的cmd窗口。
输入:spark-shell
显示上面的正常运行界面,表示本地的spark环境已搭建完成!
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 阿里最新开源QwQ-32B,效果媲美deepseek-r1满血版,部署成本又又又降低了!
· 单线程的Redis速度为什么快?
· SQL Server 2025 AI相关能力初探
· AI编程工具终极对决:字节Trae VS Cursor,谁才是开发者新宠?
· 展开说说关于C#中ORM框架的用法!
2021-12-14 谈谈MySQL中的重做日志,回滚日志,以及二进制日志的区别及各自作用
2021-12-14 【Zookeeper篇】ZooKeeper面试那些事儿
2021-12-14 Spring,SpringMVC,SpringBoot,SpringCloud有什么区别和联系?
2021-12-14 面试官:Spring AOP有哪些通知类型,它们的执行顺序是怎样的?
2021-12-14 【数据库篇】谈谈MySQL主从复制的原理(未完)
2021-12-14 盘点MySQL主从复制,在面试中能被问什么?
2021-12-14 面试官:怎么保证缓存和数据库一致性