2021年1月13日
Spark应用程序-Shuffle写流程
摘要： Shuffle的写流程 ​ ShuffleMapTask类中的runTask方法中含有一个写处理器： shuffleWriterProcessor ​ 它执行写操作的启动操作，即执行write方法，在write方法方法中还含有一个Shuffle管理器： val manager = SparkEnv. 阅读全文
posted @ 2021-01-13 15:37 有心有梦 阅读(142) 评论(0) 推荐(0) 编辑