2021年4月29日
Hive千亿级数据倾斜解决方案
摘要： 数据倾斜问题剖析 数据倾斜是分布式系统不可避免的问题，任何分布式系统都有几率发生数据倾斜，但有些小伙伴在平时工作中感知不是很明显，这里要注意本篇文章的标题—“千亿级数据”，为什么说千亿级，因为如果一个任务的数据量只有几百万，它即使发生了数据倾斜，所有数据都跑到一台机器去执行，对于几百万的数据量，一台 阅读全文
posted @ 2021-04-29 09:50 五分钟学大数据 阅读(2012) 评论(0) 推荐(1) 编辑