摘要: Spark作为分布式计算框架,多个节点的设计与相互通信模式是其重要的组成部分。 一、组件概览 对源码分析,对于设计思路理解如下: RpcEndpoint:RPC端点 ,Spark针对于每个节点(Client/Master/Worker)都称之一个Rpc端点 ,且都实现RpcEndpoint接口,内部 阅读全文
posted @ 2017-04-23 20:41 hframe 阅读(2888) 评论(4) 推荐(2) 编辑