会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
bitbitbyte
博客园
首页
新随笔
联系
订阅
管理
Spark中的transform, mappartions, foreachPartion,foreachRDD
rdd.mapPartitions与
Dstream.transform需要返回值RDD, 是转换算子(存在重复计算的问题)
rdd.foreachPartion与Dstream.foreachRDD不需要返回值, 是行动算子
注意:
如果没有缓存, 没调用一次行动算子, 都会对涉及到的转换算子计算一次.
posted @
2020-06-01 10:39
bitbitbyte
阅读(
272
) 评论(
0
)
编辑
收藏
举报
会员力量,点亮园子希望
刷新页面
返回顶部
公告