随笔分类 - Hive
hive执行任务报错Execution failed with exit status: 3
摘要:2014-12-18 03:21:03 Starting to launch local task to process map join; maximum memory = 10654842882014-12-18 03:21:08 Processing rows: 200000 Hashtabl...
阅读全文
hiveserver2支持多并发配置
摘要:首先正确的配置Hive的表锁管理,这需要通过ZooKeeper集群来实现。如果不进行如下配置,HiveServer2无法提供并发的查询操作。在hive的配置文件(这里是/etc/hive/conf/hive-site.xml)中进行如下配置:hive.zookeeper.quorumZookee...
阅读全文
hive0.14安装配置
摘要:原文:http://blog.csdn.net/bluishglc/article/details/41652111
阅读全文
Hive java.lang.OutOfMemoryError: unable to create new native thread异常
摘要:最近在同一时刻执行多个hive -e 操作时,出现了java.lang.OutOfMemoryError: unable to create new native thread异常 或Exception in thread "main" java.lang.RuntimeException: ja...
阅读全文
使用sqoop从mysql往hive中增量导数据shell脚本
摘要:一:sqoop增量导入的两种方式Incremental import arguments:ArgumentDescription--check-column (col)Specifies the column to be examined when determining which rows to...
阅读全文
sqoop往hive中导入数据报找不到数据库错误
摘要:sqoop版本为1.4.4,hadoop版本为2.2.0,hive版本为0.11.0,hive元数据存放位置为mysql,当使用sqoop 从mysql往hive中导入数据时,总是提示找不到所指定的hive数据库,事实上hive中已存在该数据库,sqoop中也设置了hive路 径,/etc/pro...
阅读全文