< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

 

1、Hive数据导入

2、Hive的数据查询

3、Hive的Java客户端和自定义函数

1、Hive数据导入

(1.1)使用Load语句导入

HiveQL中提供LOAD DATA命令,用于导入数据到Hive表中。根据导入文件是在本地,还是在HDFS文件系统上,LOAD DATA命令,又可分为LOAD DATA LOCAL INPATHLOAD DATA INPATH

将student02.txt导入t2中

load data  local inpath '/root/data/student01.txt' into table t2
如果指明Local 则说明数据存储在lnux操作系统上,否则数据存储在HDFS中
假设文件在HDFS中
load data inpath'/user/b.txt' into table t2;

数据加载到分区表中

load data local inpath  '/root/data/'  

into 

table partition_table_1

partition(sex='')
load data local inpath  '/root/data/'  

into 

table partition_table_2

partition(sex='')

(1.2)使用Sqoop导入数据

 

(1.3)使用HDFS命令

Hive表数据与HDFS文件是对应的,因此,可以使用HDFS文件管理命令将文件直接复制/移动到Hive表数据存放目录,从而达到将数据导入相应Hive表的目的。 
使用如下命令,建立一个Hive表user:

1
create table user(id int,name string) row format delimited fields terminated by ',' ;

通过以下命令将“a.txt”文件直接复制到表对应的数据存放目录:

hadoop fs -put a.txt /user/hive/warehouse/user/

(1.4)使用 insert   into table tablename select ...语句

首先使用如下命令创建一个新的Hive表userlog。

create table userlog(id int,name string)

接着使用如下命令从以上提及到的user表中获取数据插入userlog表中。

insert into  table  userlog 
   selectid,name from user

(1.5)使用create table tablenames as select ...语句

可以在创建Hive表的同时从其他表获取数据进行填充。比如执行如下语句,表示创建了一个新的Hive表,同时从上述提及到的user表中获取数据进行了填充。

create table  personlog 
as 
select id,name from user

 

 

2、Hive的数据查询

 

3、Hive的Java客户端和自定义函数

 

posted on   脆皮软心  阅读(107)  评论(0编辑  收藏  举报
编辑推荐:
· 理解Rust引用及其生命周期标识(下)
· 从二进制到误差:逐行拆解C语言浮点运算中的4008175468544之谜
· .NET制作智能桌面机器人:结合BotSharp智能体框架开发语音交互
· 软件产品开发中常见的10个问题及处理方法
· .NET 原生驾驭 AI 新基建实战系列:向量数据库的应用与畅想
阅读排行:
· 2025成都.NET开发者Connect圆满结束
· 后端思维之高并发处理方案
· 在 VS Code 中,一键安装 MCP Server!
· 千万级大表的优化技巧
· 10年+ .NET Coder 心语 ── 继承的思维:从思维模式到架构设计的深度解析
点击右上角即可分享
微信分享提示