会员
周边
捐助
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
_泡泡
博客园
首页
新随笔
联系
订阅
管理
2023年7月5日
Spark的一些重要概念
摘要: # Shuffle的深入理解 什么是Shuffle,本意为洗牌,在数据处理领域里面,意为将数打散。 问题:shuffle一定有网络传输吗?有网络传输的一定是Shuffle吗? ## Shuffle的概念 通过网络将数据传输到多台机器,数据被打散,但是有网络传输,不一定就有shuffle,Shuffl
阅读全文
posted @ 2023-07-05 19:32 _泡泡
阅读(118)
评论(0)
推荐(0)
编辑
公告