2018年4月19日
hive 处理小文件，减少map数
摘要： 1、hive.merge.mapfiles，True时会合并map输出。2、hive.merge.mapredfiles，True时会合并reduce输出。3、hive.merge.size.per.task，合并操作后的单个文件大小。4、hive.merge.size.smallfiles.avg 阅读全文
posted @ 2018-04-19 10:06 wq920 阅读(2107) 评论(0) 推荐(0) 编辑