spark复习笔记(6):数据倾斜

一、数据倾斜

spark数据倾斜，map阶段对key进行重新划分。大量的数据在经过hash计算之后，进入到相同的分区中，zao

posted @ 2018-11-02 22:21  stone1234567890  阅读(142)  评论(0)  编辑  收藏  举报