分布式数据仓库Hive

Hive系统介绍

Hive是基于Hadoop的数据仓库

Hive方便使用SQL来执行读取、写入、管理基于分布式存储的大型数据集

可以基于存储数据来构建数据结构,提供命令行和JDBC两种开发方式

Hive的设计思想

Hive不是数据库,是数据仓库,它的设计是围绕数据分析,而不是数据存储,或者说Hive是基于数据库上面的数据分析工具

Hive的设计特点

Hive的数据所有都存储在Hadoop兼容的文件系统中(例如HDFS)。

Hive在加载数据过程中不会对数据进行任何的修改,只是将数据移动到HDFS中Hive设定的目录下

Hive的表实际上是HDFS的一个文件目录,一个表名对应一个目录名,如果有分区表的话,则分区值对应子目录名。

提供类SQL的查询方式HQL,实际运行是把SQL查询转换为MR的job执行

 

posted @ 2022-06-16 09:20  小蟋帅  阅读(146)  评论(0编辑  收藏  举报