2023年5月10日
【大数据】Hive 小文件治理和 HDFS 数据平衡讲解
摘要： 一、Hive 小文件概述 在Hive中，所谓的小文件是指文件大小远小于HDFS块大小的文件，通常小于128 MB，甚至更少。这些小文件可能是Hive表的一部分，每个小文件都包含一个或几个表的记录，它们以文本格式存储。 Hive通常用于分析大量数据，但它在处理小文件方面表现不佳，Hive中存在大量小文 阅读全文
posted @ 2023-05-10 22:29 大数据老司机 阅读(683) 评论(0) 推荐(0) 编辑