2015年8月16日
Spark的TorrentBroadcast：概念和原理
摘要： 依据Spark 1.4.1源码SparkContext的broadcast方法注释可以用SparkContext将一个变量广播到所有的executor上，使得所有executor都能获取这个变量代表的数据。SparkContext对于broadcast方法的注释为：/** * Broadcast a... 阅读全文
posted @ 2015-08-16 11:33 devos 阅读(2037) 评论(0) 推荐(0) 编辑