会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Languid
博客园
首页
新随笔
联系
订阅
管理
2019年8月26日
Spark(二)
摘要: 一、广播变量与累加器 1.广播变量机制 将传递给task的值,变成传递给executor。 为什么可以共用,因为task是executor下的线程。 只读的变量,在task中不允许修改 2.累加器介绍 在只写的变量,在task中只允许被修改,不允许读的操作。 但是在driver中就只能读操作。 广播
阅读全文
posted @ 2019-08-26 10:39 Languid
阅读(131)
评论(0)
推荐(0)
编辑
公告