摘要: 创建表hive> CREATE TABLE pokes (foo INT, bar STRING);创建表并创建索引字段dshive> CREATE TABLE invites (foo INT, bar STRING) PARTITIONED BY (ds STRING);显示所有表hive> S... 阅读全文
posted @ 2013-08-13 15:14 夏至冬末 阅读(3362) 评论(0) 推荐(0) 编辑
摘要: 一、安装准备 1、下载hadoop,地址:http://hadoop.apache.org/,下载相应版本 2、下载JDK版本:Hadoop只支持1.6以上,地址:http://www.oracle.com/technetwork/java/javase/downloads/index.... 阅读全文
posted @ 2013-08-13 15:01 夏至冬末 阅读(161) 评论(0) 推荐(0) 编辑
摘要: 一:文件操作1、建立目录[hadoop@hadoop1:hadoop]$bin/hadoop dfs -mkdir testdir在HDFS中建立一个名为testdir的目录2、上传文件到HDFS[hadoop@hadoop1:hadoop]$bin/hadoop dfs -put /home/ha... 阅读全文
posted @ 2013-08-13 14:39 夏至冬末 阅读(138) 评论(0) 推荐(0) 编辑
摘要: 设计理念: 1、超大文件 2、流式数据访问 3、商用普通硬件不适合场景: 1、低时间延迟的数据访问 2、大量的小文件 3、多用户写入,任意修改文件一、HDFS的基本概念1.1、数据块(block)HDFS(Hadoop Distributed File System)默认的最基本的存储单位是64M的... 阅读全文
posted @ 2013-08-13 14:29 夏至冬末 阅读(194) 评论(0) 推荐(0) 编辑
摘要: 创建表:hive> CREATE TABLE pokes (foo INT, bar STRING); Creates a table called pokes with two columns, the first being an integer and the other a string创建... 阅读全文
posted @ 2013-08-13 14:10 夏至冬末 阅读(235) 评论(0) 推荐(0) 编辑