Spark的BlockManager数据存储与管理机制
摘要：
一、概述 BlockManager是整个Spark底层负责数据存储与管理的一个组件，Driver和Executor的所有数据都由相应节点上的BlockManager进行管理。 （1）driver端上的存储与管理 Driver上有BlockManagerMaster，负责对各个节点上的BlockMan 阅读全文
posted @ 2020-09-16 10:46 hdc520 阅读(355) 评论(0) 推荐(0) 编辑
