HIVE 的数据存储

HIVE 的数据存储:

  1、hive中所有的数据都存储在HDFS中,没有专门的数据存储格式(可支持Text,SequenceFile,ParquetFile,RCFILE等))

  2、只需要建表时告诉hive数据中的列分隔符和行分隔符,hive就可以解析数据。

  3、hive中包含以下数据模型:DB、Table,External Table,Partition,Bucket。

    • db:在hdfs中表示为${hive.metastore.warehouse.dir}目录下一个文件夹
    • table:在hdfs中表现所属db目录下一个文件夹
    • external table:外部表,与table类似,不过其数据存放位置可以在任意指定路径(普通表:删除表。hdfs中的文件也会删除,external外部表删除后,hdfs上文件还在,只是把文件删除,理解为快捷方式?)
    • partition:在hdfs中表现为table目录下的子目录
    • bucket 桶:在hdfs中表现为同一个表目录下根据hash散列之后的多个文件,会根据不同的文件把数据放到不同文件中。

posted on 2018-03-20 12:32  RUI.Z  阅读(726)  评论(0编辑  收藏  举报

导航