摘要： 1.引入包中的全部方法 2.表示集合元素 表示集合元素的元素内容，并进行计算 3.表示元组内容 4.模糊匹配 其中_表示其他的意思 5.传递不定长参数 使用:_*， 将序列或集合的内容全部当做参数传递 阅读全文

摘要： 前提条件： 1、Spark Standalone 集群部署完成 2、Intellij Idea 能够运行 Spark local 模式的程序。 源码： 这里主要的思想还是将打包的jar提交到集群。 使用.setJars方法 阅读全文

摘要： RDD Resilient Distributed Datasets弹性分布式数据集 Spark revolves around the concept of a resilient distributed dataset (RDD), which is a fault-tolerant colle 阅读全文

摘要： Spark简介 官网地址：http://spark.apache.org/ Apache Spark is a fast and general engine for large-scale data processing. Speed Run programs up to 100x faster 阅读全文

摘要： 一、读取行 读取文件这里不能重复读取，只显示一遍文本内容 二、读取字符 三、读取词法单元和数字 四、从URL或其他源读取 五、读取二进制文件 Scala没有读取二进制文件的方法，需要使用Java类库， 结果： 六、写入文本文件 结果： 在项目工程目录下，生成t1.txt文件 七、访问目录 八、序列化 阅读全文

摘要： 一、扩展类 二、重写方法 调用超类的方法使用: super 三、类型检查和转换 四、受保护字段和方法 protected 可以被子类访问 五、超类的构造 传递到超类的构造函数 Scala类可以扩展java类 六、重写字段 常用做法：用val重写抽象的def 七、匿名字段 结果： 八、抽象类 九、抽象 阅读全文

摘要： 一、包 同一个包可以定义在多个文件中，你也可以在同一个文件中定义多个包 文件名为：pack.scala 在其他文件中可以引用该包的类 目录和包没有关联关系 二、作用域规则 使用绝对包名：new _root_.scala.collection.mutable.ArrayBuffer[Int] 三、串联 阅读全文

摘要： 一、单例对象 Scala没有静态方法或静态字段，可以用object来达到相同的目的 结果 在Scala中可以用对象来实现： 作为存放工具函数或常量的地方 高效的共享单个不可变实例 需要用单个实例来协调某个服务(单例模式) 二、伴生对象 如果用到即有实例方法又有静态方法的类，在scala中，你可以通过 阅读全文

摘要： 一、简单类和无参方法 结果 改值函数使用() 取值函数不使用() 方法默认是共有的 二、带getter和setter属性 结果 三、对象私有字段 四、Bean属性 结果 五、辅助构造器 六、主构造器 七、嵌套类 1. 2. 3. 4. 5. 6&7. val 8.必填参数设置为主构造器 9. 10. 阅读全文

摘要： 一、构造映射 结果： 对偶 "A"->1 ("A",1) 二、获取映射中的值 三、更新映射中的值 可变映射 结果 不可变映射 通过声明var变量来重新赋值，完成元素的增、删 结果 四、迭代映射 结果 五、已排序映射 结果 六、与Java的互操作 七、元组 结果 八、拉链操作 把元组的多个值绑定在一起 阅读全文