2018年8月6日

hive的中的sql的执行顺序。

摘要: 今天在测试在写hive sql的时候注意到在进行查询的时候我们把order by放在后面,前面如果没有这个字段,则执行报错。 他就会报下面的错误。其实这个时候我们就想着是不是哪里写错了。但是仔细一看。好像并没有错误。 这个时候我们就可能会想是不是因为在hive当中语句的执行顺序有问题。于是我在前面s 阅读全文

posted @ 2018-08-06 18:11 gxg123 阅读(10234) 评论(0) 推荐(0) 编辑

关于hive中的reduce个数的设置。

摘要: 我们都知道在进行hive的查询的时候,设置合理的reduce个数能够使计算的速度加快。 具体的提高速度的方法有下面这些: (1) hive.exec.reducers.bytes.per.reducer(每个reduce任务处理的数据量,默认为1000^3=1G) hive.exec.reducer 阅读全文

posted @ 2018-08-06 17:33 gxg123 阅读(14470) 评论(0) 推荐(1) 编辑

导航