2019年2月27日
dataframe 基本操作
摘要： package com.jason.example import org.apache.spark.sql.functions.broadcast class DFTest extends SparkInstance { import spark.implicits._ val df = Seq( ("jason", 1, "理想",0), (null, 2, "... 阅读全文
posted @ 2019-02-27 20:56 生心无住 阅读(1539) 评论(0) 推荐(0) 编辑
rdd 基本操作
摘要： package com.jason.example import org.apache.spark.rdd.RDD class RddTest extends SparkInstance { val sc = spark.sparkContext val rdd = sc.parallelize(1 to 10) val rdd2 = sc.parallelize(9 to 15... 阅读全文
posted @ 2019-02-27 20:55 生心无住 阅读(576) 评论(0) 推荐(0) 编辑