摘要: 10.hive调优 10.1 Fetch抓取 Hive中对某些情况的查询可以不必使用MapReduce计算。例如:SELECT * FROM score;在这种情况下,Hive可以简单地读取score对应的存储目录下的文件,然后输出查询结果到控制台。通过设置hive.fetch.task.conve 阅读全文
posted @ 2020-11-12 18:25 所向披靡zz 阅读(85) 评论(0) 推荐(0) 编辑
摘要: 7.hive的数据压缩 在实际工作当中,hive当中处理的数据,一般都需要经过压缩,前期我们在学习hadoop的时候,已经配置过hadoop的压缩,我们这里的hive也是一样的可以使用压缩来节省我们的MR处理的网络带宽 7.1 MR支持的压缩编码 压缩格式工具算法文件扩展名是否可切分 DEFAULT 阅读全文
posted @ 2020-11-12 17:58 所向披靡zz 阅读(406) 评论(0) 推荐(0) 编辑
摘要: 4. Hive 查询语法 4.1. SELECT SELECT [ALL | DISTINCT] select_expr, select_expr, ...FROM table_reference[WHERE where_condition][GROUP BY col_list [HAVING co 阅读全文
posted @ 2020-11-12 17:56 所向披靡zz 阅读(458) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-11-12 14:52 所向披靡zz 阅读(52) 评论(0) 推荐(0) 编辑