2019年7月22日
Spark广播变量和累加器
摘要： 一.广播变量图解 二.代码 三.注意事项 1.不能将一个RDD使用广播变量广播出去，因为RDD是不存储数据的【弹性分布式数据集】。可以将RDD的结果广播出去【collect，数据不能太多】。 2.广播变量只能在Driver端定义，不能在Executor端定义。 3.在Driver端可以修改广播变量的 阅读全文
posted @ 2019-07-22 21:05 云山之巅 阅读(221) 评论(0) 推荐(0) 编辑