随笔分类 -  Hive

hive执行任务报错Execution failed with exit status: 3
摘要:2014-12-18 03:21:03 Starting to launch local task to process map join; maximum memory = 10654842882014-12-18 03:21:08 Processing rows: 200000 Hashtabl... 阅读全文
posted @ 2015-07-31 11:19 LIUSANNITY 阅读(1307) 评论(0) 推荐(0) 编辑
hiveserver2支持多并发配置
摘要:首先正确的配置Hive的表锁管理,这需要通过ZooKeeper集群来实现。如果不进行如下配置,HiveServer2无法提供并发的查询操作。在hive的配置文件(这里是/etc/hive/conf/hive-site.xml)中进行如下配置:hive.zookeeper.quorumZookee... 阅读全文
posted @ 2015-03-19 15:01 LIUSANNITY 阅读(1726) 评论(0) 推荐(0) 编辑
hive0.14安装配置
摘要:原文:http://blog.csdn.net/bluishglc/article/details/41652111 阅读全文
posted @ 2014-12-30 16:51 LIUSANNITY 阅读(134) 评论(0) 推荐(0) 编辑
Hive java.lang.OutOfMemoryError: unable to create new native thread异常
摘要:最近在同一时刻执行多个hive -e 操作时,出现了java.lang.OutOfMemoryError: unable to create new native thread异常 或Exception in thread "main" java.lang.RuntimeException: ja... 阅读全文
posted @ 2014-11-13 14:59 LIUSANNITY 阅读(1793) 评论(0) 推荐(0) 编辑
使用sqoop从mysql往hive中增量导数据shell脚本
摘要:一:sqoop增量导入的两种方式Incremental import arguments:ArgumentDescription--check-column (col)Specifies the column to be examined when determining which rows to... 阅读全文
posted @ 2014-06-20 17:59 LIUSANNITY 阅读(2033) 评论(2) 推荐(0) 编辑
sqoop往hive中导入数据报找不到数据库错误
摘要:sqoop版本为1.4.4,hadoop版本为2.2.0,hive版本为0.11.0,hive元数据存放位置为mysql,当使用sqoop 从mysql往hive中导入数据时,总是提示找不到所指定的hive数据库,事实上hive中已存在该数据库,sqoop中也设置了hive路 径,/etc/pro... 阅读全文
posted @ 2014-06-16 17:36 LIUSANNITY 阅读(619) 评论(0) 推荐(0) 编辑