阿里实时建表聚合时的数据倾斜 常用方法解决

1、将group by字段加hash随机字符串,再分组,这样聚合一部分相同的,再将结果group by (去掉hash字符串的字段)这时数据量就小了。

2、两个不同字段分组,再将一个字段分组,这样两次聚合,分担了后数据量就不大了

 

posted @ 2019-11-01 11:31  啊啊啊啊鹏  阅读(230)  评论(0编辑  收藏  举报
1 2