spark 存储管理机制

累加器 -- Accumulators

 

广播变量--Broadcast Variables

 

 

 

 

 思考

 

回顾

 

 

 

存储管理模块架构--从架构上来看

 

 存储管理模块架构--通信层

存储管理模块架构--存储层

 

 

存储管理模块架构--数据块与分区的关系

回顾-RDD控制操作

 

 持久化级别

 

 

  如何选择持久化级别

 

 

缓存淘汰机制

 

 

Shuffle数据持久化

 

 

 广播变量--Broadcast Variables