2020年12月17日
Spark RPC通讯环境初始化源码分析
摘要： 概述 spark在2.0前使用的scala的akka框架实现的rpc，由于很多用户会使用Akka做消息传递，会和Spark内嵌的版本产生冲突，所以在spark2.0以后通过netty实现了一个类似akka的actor模型替换akka成为spark的rpc通讯层； Driver端通讯环境初始化 Spa 阅读全文
posted @ 2020-12-17 19:27 Sirius- 阅读(269) 评论(0) 推荐(0) 编辑