摘要： Spark学习笔记3 IDEA编写scala代码并打包上传集群运行 我们在IDEA上的maven项目已经搭建完成了，现在可以写一个简单的spark代码并且打成jar包 上传至集群，来检验一下我们的spark搭建后是否真正可以使用了 1.今天就和大家写一个计算π的spark代码 下面我把已经写好了的代 阅读全文

摘要： Spark学习笔记2 配置spark所需环境 1.首先先把本地的maven的压缩包解压到本地文件夹中，安装好本地的maven客户端程序，版本没有什么要求 不需要最新版的maven客户端。 解压完成之后在解压好的maven客户端的文件夹内打开conf文件夹，修改里面的settings.xml文件 然后 阅读全文