导航

2016年1月30日

摘要: 错误日志:regionserver.HRegionServer: Failed deleting my ephemeral nodezookeeper.RecoverableZooKeeper: ZooKeeper delete failed after 4... 阅读全文

posted @ 2016-01-30 13:50 ggzone 阅读(227) 评论(0) 推荐(0) 编辑

摘要: 错误日志:regionserver.HRegionServer: Failed deleting my ephemeral nodezookeeper.RecoverableZooKeeper: ZooKeeper delete failed after 4 attempts解决:a... 阅读全文

posted @ 2016-01-30 13:49 ggzone 阅读(316) 评论(0) 推荐(0) 编辑

摘要: 机器总共16G内存,sqoop导入数据时大约需要2G左右mapred-site.xml mapreduce.framework.name yarn mapreduce.jobhistory.address ... 阅读全文

posted @ 2016-01-30 13:45 ggzone 阅读(4737) 评论(0) 推荐(0) 编辑

摘要: 机器总共16G内存,sqoop导入数据时大约需要2G左右mapred-site.xml mapreduce.framework.name yarn mapreduce.jobhistory.a... 阅读全文

posted @ 2016-01-30 13:45 ggzone 阅读(139) 评论(0) 推荐(0) 编辑

摘要: 未使用root用户操作: 数据库版本要一致 数据目录:/data/mysqlbak/ 先按阿里给的步骤操作,最后出现一步出现,无法找到back_xxx.conf,但该文件已经存在。解决方法:sudo vim /etc/apparmor.d/usr.sbin.... 阅读全文

posted @ 2016-01-30 13:22 ggzone 阅读(102) 评论(0) 推荐(0) 编辑

摘要: 未使用root用户操作: 数据库版本要一致 数据目录:/data/mysqlbak/ 先按阿里给的步骤操作,最后出现一步出现,无法找到back_xxx.conf,但该文件已经存在。解决方法:sudo vim /etc/apparmor.d/usr.sbin.mysqld添加: /da... 阅读全文

posted @ 2016-01-30 13:21 ggzone 阅读(127) 评论(0) 推荐(0) 编辑

摘要: hive中field如果是string,比如id,那么使用10000000000+id结果是科学计数法显示,转换为正常显示方法:select (10000000000+cast(id as int)) as id from tb1 limit 10;hive 调用java的函数,必... 阅读全文

posted @ 2016-01-30 13:17 ggzone 阅读(803) 评论(0) 推荐(0) 编辑

摘要: hive中field如果是string,比如id,那么使用10000000000+id结果是科学计数法显示,转换为正常显示方法:select (10000000000+cast(id as int)) as id from tb1 limit 10;hiv... 阅读全文

posted @ 2016-01-30 13:17 ggzone 阅读(261) 评论(0) 推荐(0) 编辑

摘要: CREATE EXTERNAL TABLE table1(key string,zoneid int,result int,) STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' W... 阅读全文

posted @ 2016-01-30 13:10 ggzone 阅读(145) 评论(0) 推荐(0) 编辑

摘要: CREATE EXTERNAL TABLE table1(key string,zoneid int,result int,) STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' WITH SERDEPROP... 阅读全文

posted @ 2016-01-30 13:09 ggzone 阅读(189) 评论(0) 推荐(0) 编辑

摘要: sqoop import --driver com.mysql.jdbc.Driver --connect "jdbc:mysql://11.143.18.29:3306/db_1" --username root --password root --qu... 阅读全文

posted @ 2016-01-30 13:04 ggzone 阅读(298) 评论(0) 推荐(0) 编辑

摘要: sqoop import --driver com.mysql.jdbc.Driver --connect "jdbc:mysql://11.143.18.29:3306/db_1" --username root --password root --query "select r... 阅读全文

posted @ 2016-01-30 13:03 ggzone 阅读(1091) 评论(2) 推荐(0) 编辑

摘要: $HBASE_HOME/bin/hbase org.apache.hadoop.hbase.mapreduce.RowCounter 'tablename' 阅读全文

posted @ 2016-01-30 12:58 ggzone 阅读(100) 评论(0) 推荐(0) 编辑

摘要: $HBASE_HOME/bin/hbase org.apache.hadoop.hbase.mapreduce.RowCounter 'tablename' 阅读全文

posted @ 2016-01-30 12:57 ggzone 阅读(147) 评论(0) 推荐(0) 编辑