spark调优2

1 选择正确的transaction

遇到groupByKey().map(), 替换为reduceByKey()

2 控制shuffle的次数

3 调试并发

posted on 2018-09-14 03:15  钻研spark  阅读(95)  评论(0)    收藏  举报

导航