yetang307

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2024年1月20日

摘要: Shuffle阶段划分: shuffle write:mapper阶段,上一个stage得到最后的结果写出 shuffle read :reduce阶段,下一个stage拉取上一个stage进行合并 1)未经优化的hashShuffleManager: HashShuffle是根据task的计算结果 阅读全文
posted @ 2024-01-20 22:43 椰糖 阅读(2) 评论(0) 推荐(0) 编辑