2019年3月16日
【Spark调优】Shuffle原理理解与参数调优
摘要： 【生产实践经验】 【生产实践经验】 生产实践中的切身体会是：影响Spark性能的大BOSS就是shuffle，抓住并解决shuffle这个主要原因，事半功倍。 【Shuffle原理学习笔记】 【Shuffle原理学习笔记】 1.未经优化的HashShuffleManager 注：这是spark1.2 阅读全文
posted @ 2019-03-16 10:46 wwcom123 阅读(846) 评论(0) 推荐(0) 编辑