MapReduce-day2
摘要：
预聚合 在map合并之后，reduce拉取之前有预聚合操作（combiner或者map join） 预聚合目的：减少reduce拉取的次数，加快map任务处理的速度。 不能确定combiner函数会调用多少次，因为不确定map任务有多少个 combiner不适用于求平均数、根号、次方~ 数据倾斜解决 阅读全文
posted @ 2022-08-28 23:39 不想写代码的小玉 阅读(25) 评论(0) 推荐(0) 编辑
