2019年9月2日
spark内存管理
摘要： 一、内存划分 执行内存 (Execution Memory) : 主要用于存放 Shuffle、Join、Sort、Aggregation 等计算过程中的临时数据； 存储内存 (Storage Memory) : 主要用于存储 spark 的 cache 数据，例如RDD的缓存、unroll数据； 阅读全文
posted @ 2019-09-02 09:41 力扛九鼎 阅读(439) 评论(0) 推荐(0) 编辑