spark--广播器 


场景: 本地集合对象 和 分布式集合对象(RDD) 进行关联的时候
需要将本地集合对象 封装为广播变量
可以节省:
1. 网络IO的次数
2. Executor的内存占用

 

posted @ 2024-01-19 15:52  阿飞藏泪  阅读(3)  评论(0)  编辑  收藏  举报
1 2 3
4