摘要: 聚合操作使用reduceByKey/aggregateByKey替代groupByKey 聚合操作使用reduceByKey/aggregateByKey替代groupByKey 参见我的这篇博客说明 【Spark调优】:如果实在要shuffle,使用map侧预聚合的算子 内存充足前提下使用mapP 阅读全文
posted @ 2019-03-13 10:43 wwcom123 阅读(383) 评论(0) 推荐(0) 编辑