2014年8月28日

hive join 优化

摘要: common join : 即reducer join,瓶颈在shuffle阶段,会产生较大的网络io;map join:即把小表放前面,扫描后放入每个节点的内存,在map阶段进行匹配;开启map join:set hive.auto.convert.join = true;hive.mapjoin... 阅读全文

posted @ 2014-08-28 15:36 a_badegg 阅读(287) 评论(0) 推荐(0) 编辑

导航