摘要:
四, Spark 运行架构 4.1 整体架构 Spark框架的核心是一个计算引擎, 整体来说, 它采用了主-从master-slav... 阅读全文
摘要:
在学习Spark, 深入分布式计算之前, 我们有必要先体会一下分布式计算的特性和简单原理;那么我们基于Java去理解, 实现分布式的... 阅读全文
摘要:
三, Spark 运行环境 Spark 的运行模式有 Local(也称单节点模式),Standalone(集群模式),Spark ... 阅读全文
摘要:
一, Spark概述 1.1 什么是Spark Spark是一种基于内存的快速,通用,可扩展的大数据分析计算引擎;“Apache S... 阅读全文
摘要:
1. 提取器 2. Unapply方法 快速上手, 可略过下面 Scala 提取器是一个实现了Unaply方法的对象;Unappl... 阅读全文
摘要:
六, 模式匹配 Scala中的模式匹配类似于Java中的switch语法,但是scala从语法中补充了更多的功能, 所以更加强大; ... 阅读全文
摘要:
1. Scala队列 1,1 Scala Queen 定义 Scala 同 Java 一样,已经直接给出了 Queue 的实现。它本... 阅读全文
摘要:
1. 类型检查和转换 用法说明 obj.isInstanceOf[T] 判断obj是不是T类型, 返回布尔值 obj.asInsta... 阅读全文
摘要:
Scala 基础集合计算函数代码示例 详细总结查看本文 package collectionsdemoimport scala.co... 阅读全文
摘要:
五-2, 集合常用函数 在学习本文之前, 必须掌握以下知识点 函数的最简化原则元组的概念和使用方法函数柯里化隐式参数(可选) ... 阅读全文