摘要: 本文基于Spark 1.6.0之后的版本 Spark 1.6.0引入了对堆外内存的管理并对内存管理模型进行了改进, "SPARK 11389" 。 从物理上,分为堆内内存和堆外内存;从逻辑上分为execution内存和storage内存。 Execution内存主要是用来满足task执行过程中某些算 阅读全文
posted @ 2017-05-11 09:41 数客联盟 阅读(1862) 评论(0) 推荐(0) 编辑
摘要: 根据 "官方API" 的定义: final def ==(arg0: Any): Boolean The expression x == that is equivalent to if (x eq null) that eq null else x.equals(that). final def 阅读全文
posted @ 2017-05-11 09:31 数客联盟 阅读(5334) 评论(0) 推荐(0) 编辑