2017年7月3日
hive中，动态添加map和reduce的大小，以增加并行度
摘要： map是配置mapred.max.split.size，来定义map处理文件的大小，默认是256000000字段，换算就是256M。 如果想增加map的并行度，那么就是减少map处理文件的大小即可。 即set mapred.max.split.size=xxx（更小的字节） reduce和map是一 阅读全文
posted @ 2017-07-03 19:21 HarkLee 阅读(1913) 评论(0) 推荐(0) 编辑