Scala进阶之路-idea下进行spark编程

　　　　　　　　　　Scala进阶之路-idea下进行spark编程

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　作者：尹正杰

版权声明：原创作品，谢绝转载！否则将追究法律责任。

 

 

 

 

1>.创建新模块并添加maven依赖

 1 <?xml version="1.0" encoding="UTF-8"?>
 2 <project xmlns="http://maven.apache.org/POM/4.0.0"
 3          xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
 4          xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
 5     <modelVersion>4.0.0</modelVersion>
 6 
 7     <groupId>cn.org.yinzhengjie</groupId>
 8     <artifactId>MySpark</artifactId>
 9     <version>1.0-SNAPSHOT</version>
10 
11     <dependencies>
12         <dependency>
13             <groupId>org.apache.spark</groupId>
14             <artifactId>spark-core_2.11</artifactId>
15             <version>2.1.0</version>
16         </dependency>
17 
18     </dependencies>
19 </project>

 

2>.编写scala代码(使用类型推断)

 

 

3>.scala编程(定义具体类型)

 

4>.编写java版 wordcount

 

posted @ 2018-07-27 14:37  尹正杰  阅读(326)  评论(0)  编辑  收藏  举报