Hive的基本概念

Hive是什么

hive是基于Hadoop的一个数据仓库工具,能够将结构化的数据映射成为一张表,提供类SQL的查询
本质是转化成mapReduce程序

为什么使用Hive

  1. 简单容易上手
  2. 对实时性要求不高的时候使用
  3. 适合处理大数据
  4. 可以自定义函数

架构

在这里插入图片描述
由上图可以看出一共由5个部分组成,Mapreduce和HDFS可以归属于Hadoop

  1. Client
  2. Meta Store:表名、表所属的数据库(默认是default)、表的拥有者、列/分区字段、表的类型(是否是外部表)、表的数据所在目录等
  3. Driver:
    • 解析器
    • 优化器
    • 编译器
    • 执行器
  4. Hadoop:Hdfs用于存储,MapReduce用于计算

运行机制在这里插入图片描述

hive接收到SQL语句,使用自己的Driver并结合元数据,将SQL翻译成mapReduce,提交到Hadoop中执行,最后将结果返回

Hive和数据库有哪些区别

  1. 数据存储位置:Hive是存储在HDFS上面,而其他数据库的存储位置一般为磁盘
  2. Hive不支持数据的修改 比如insert
  3. Hive没有索引
  4. 数据库有自己的执行引擎,而Hive是转成MapReduce
  5. 数据规模,HIve支持大数据
  6. HIve是建立在Hadoop之上的,所以Hadoop的可扩展性Hive同样拥有
posted @   daladalabao  阅读(65)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 终于写完轮子一部分:tcp代理 了,记录一下
· 震惊!C++程序真的从main开始吗?99%的程序员都答错了
· 别再用vector<bool>了!Google高级工程师:这可能是STL最大的设计失误
· 单元测试从入门到精通
· 【硬核科普】Trae如何「偷看」你的代码?零基础破解AI编程运行原理
点击右上角即可分享
微信分享提示