IDEA 搭建 Spark 源码 (Ubuntu)

版本:Spark 2.4.3/JDK 1.8/Scala 2.11.0

1、选择Spark版本、压缩包下载。

2、IDEA中左下角Terminal下输入: mvn -DskipTests clean package

3、Maven工程导入到IDEA中

 

 

 

 

问题:

在Lifecycle下点击clean、install后出现:

Failed to execute goal net.alchim31.maven:scala-maven-plugin:3.2.2:compile (scala-compile-first) on project spark-sql_2.11: wrap: java.io.IOException: Cannot run program "javac": error=2, 没有那个文件或目录 -> [Help 1]

解决办法:修改pom.xml文件

...

 

 

posted @ 2019-07-12 16:21  wjunneng  Views(455)  Comments(0Edit  收藏  举报