摘要: Spark中的源码的提取器和注解 @SparkContext.scala @ volatile 线程专用 保证线程间共享内容的一致性 @ DeveloperApi 表示开发者使用的API @SQLContext.scala @Experimental试验性方法,不建议使用 @transient瞬时状 阅读全文
posted @ 2018-11-22 15:31 Mars、少年 阅读(333) 评论(0) 推荐(0) 编辑
摘要: 1.SparkSession.scala 2.SparkContext.scala 3.SQLContext.scala 阅读全文
posted @ 2018-11-22 15:22 Mars、少年 阅读(231) 评论(0) 推荐(0) 编辑
摘要: 本篇文章主要讲述Scala函数式编程之偏函数,异常,及Lazy 第一部分:偏函数 偏函数:当函数有多个参数,而在使用该函数时不想提供所有参数(比如函数有3个参数),只提供0~2个参数,此时得到的函数便是偏函数。 被lazy修饰的只有在被调用的时候才会实例化 阅读全文
posted @ 2018-11-22 11:37 Mars、少年 阅读(211) 评论(0) 推荐(0) 编辑
摘要: package com.wanji.scala.test import javax.swing.text.AbstractDocument.Content import scala.actors.Actor case class Hello(name:String,content:String,send:Actor) case class HelloBack(name:String,con... 阅读全文
posted @ 2018-11-22 10:19 Mars、少年 阅读(242) 评论(0) 推荐(0) 编辑