摘要: UDF是User defined Function的简写,意思是用户自定义方法。 UDF开发流程 1 eclipse开发一个java程序,导入hive的jar包 2 开发代码 3 将java程序打成jar包,上传到hive所在的机器上, 注意开发代码的环境和运行环境的jdk版本要一致,不然会报错Un 阅读全文
posted @ 2019-11-21 20:49 Lucas_zhao 阅读(347) 评论(0) 推荐(0) 编辑
摘要: 在Hive客户端执行HQL查询报错,该查询走的是MapReduce,此时需要查看MapReduce的日志信息。 那么MR的日志在哪里呢? 首先启动historyserver,认情况下HistoryServer没有启动 进入到hadoop的bin目录下,执行以下命令,开启之后,jps一下确认有JobH 阅读全文
posted @ 2019-11-21 20:33 Lucas_zhao 阅读(3681) 评论(0) 推荐(0) 编辑
摘要: 如下测试数据 A,2015-01,5 A,2015-01,15 B,2015-01,5 A,2015-01,8 B,2015-01,25 A,2015-01,5 C,2015-01,10 C,2015-01,20 A,2015-02,4 A,2015-02,6 C,2015-02,30 C,2015 阅读全文
posted @ 2019-11-21 14:08 Lucas_zhao 阅读(454) 评论(0) 推荐(0) 编辑