2015年1月25日
转载：spark排序性能、shuffle性能分析
摘要： http://www.csdn.net/article/2015-01-23/2823682 阅读全文
posted @ 2015-01-25 10:51 wrencai 阅读(114) 评论(0) 推荐(0) 编辑
spark shullfe
摘要： 转载自：http://blog.csdn.net/lsshlsw/article/details/40918931Spark Shuffle1. Shuffle相关 当Map的输出结果要被Reduce使用时，输出结果需要按key哈希，并且分发到每一个Reducer上去，这个过程就是shuffle... 阅读全文
posted @ 2015-01-25 10:43 wrencai 阅读(598) 评论(0) 推荐(0) 编辑