kalor

导航

 

2013年3月27日

摘要: http://www.17hadoop.com/shujucangku/97.html 阅读全文
posted @ 2013-03-27 22:30 kalor 阅读(210) 评论(0) 推荐(0) 编辑
 
摘要: 可以通过多种方式将数据导入hive表1.通过外部表导入用户在hive上建external表,建表的同时指定hdfs路径,在数据拷贝到指定hdfs路径的同时,也同时完成数据插入external表。例如:编辑文件test.txt$ cat test.txt 1 hello2 world3 test4 case字段之间以'\t'分割启动hive:$ hive建external表:hive> CREATE EXTERNAL TABLE MYTEST(num INT, name STRING) > COMMENT 'this is a test' ... 阅读全文
posted @ 2013-03-27 22:24 kalor 阅读(422) 评论(0) 推荐(0) 编辑
 
摘要: 对于外部表而言,Because it's external, Hive doesn't assume it owns the data. Therefore, dropping the external table doesn't delete the data, although the metadata for the table will be deleted(即外部表的metadata与real data是分开存放的).Let's 瞧瞧看:hive> set hive.cli.print.current.db = true;hive (defaul 阅读全文
posted @ 2013-03-27 22:03 kalor 阅读(8209) 评论(0) 推荐(0) 编辑
 
摘要: The following table declaration creates an external table that can read all the data filesfor this comma-delimited data in /data/stocks:CREATE EXTERNAL TABLE IF NOT EXISTS stocks ( exchange STRING, symbol STRING, ymd STRING, price_open FLOAT, price_high FLOAT, price_low FLOAT, price_close FLO... 阅读全文
posted @ 2013-03-27 19:15 kalor 阅读(1042) 评论(0) 推荐(0) 编辑
 
摘要: Hadoop端口说明默认端口 设置位置 描述信息8020 namenode RPC交互端口8021 JT RPC交互端口50030 mapred.job.tracker.http.address JobTracker administrative web GUIJOBTRACKER的HTTP服务器和端口50070 dfs.http.address NameNode administrative web GUINAMENODE的HTTP服务器和端口50010 dfs.datanode.address DataNode control port (each DataNode listens o.. 阅读全文
posted @ 2013-03-27 18:23 kalor 阅读(410) 评论(0) 推荐(0) 编辑
 
摘要: 1、jps的作用jps类似linux的ps命令,不同的是ps是用来显示进程,而jps只显示java进程,准确的说是当前用户已启动的部分java进程信息,信息包括进程号和简短的进程command。2、某个java进程已经启动,用jps却显示不了该进程进程号这个问题已经碰到过两次了,所以在这里总结下。现象:用ps -ef|grep java能看到启动的java进程,但是用jps查看却不存在该进程的id。待会儿解释过之后就能知道在该情况下,jconsole、jvisualvm可能无法监控该进程,其他java自带工具也可能无法使用分析:java程序启动后,默认(请注意是默认)会在/tmp/hsperf 阅读全文
posted @ 2013-03-27 18:08 kalor 阅读(475) 评论(0) 推荐(0) 编辑
 
摘要: Problem 1: 程序 'java' 已包含在下列软件包中:* default-jre* gcj-4.6-jre-headless* gcj-4.7-jre-headless* openjdk-7-jre-headless* openjdk-6-jre-headless请尝试:sudo apt-... 阅读全文
posted @ 2013-03-27 17:02 kalor 阅读(1293) 评论(0) 推荐(1) 编辑