Hive metastore整体代码分析及详解
摘要：从上一篇对Hive metastore表结构的简要分析中，我再根据数据设计的实体对象，再进行整个代码结构的总结。那么我们先打开metadata的目录，其目录结构： 可以看到，整个hivemeta的目录包含metastore(客户端与服务端调用逻辑）、events（事件目录包含table生命周期中的检
阅读全文
posted @
2018-02-24 17:06
松伯
阅读(5686)
推荐(1) 编辑
Hive metastore表结构设计分析
摘要：今天总结下，Hive metastore的结构设计。什么是metadata呢，对于它的描述，可以理解为数据的数据，主要是描述数据的属性的信息。它是用来支持如存储位置、历史数据、资源查找、文件记录等功能。元数据算是一种电子式目录。为了达到编制目录的目的，必须在描述并收藏数据的内容或特色，进而达成协助数
阅读全文
posted @
2018-02-19 18:47
松伯
阅读(5721)
推荐(1) 编辑
Linux知识体系之磁盘与档案系统管理
摘要：硬盘的物理组成：由许许多多的圆形硬盘盘所组成。宜居硬盘盘能够容纳的数据量，而有所谓的单碟或者多碟。 首先，硬盘里一定会有所谓的磁头（Head）在进行该硬盘上面的读写动作，而磁头是固定在机械手臂上的，机械手臂上有多个磁头可以进行读取的动作。而当磁头固定不动，硬盘转一圈所画出来的圆就是所谓的磁道(Tra
阅读全文
posted @
2018-02-19 12:09
松伯
阅读(366)
推荐(0) 编辑
Linux知识体系之路径属性与目录
摘要：最近在看鸟哥的Linux私房菜，我觉得这本书还是很不错的。这里进行相关的总结。 1、Linux目录权限概念 Linux一般讲目录可存取的方式分为三个类别，分别是owner/group/other,且各有read/write/excute等权限。在Linux系统当中，预设的情况下，所有的系统上的账号与
阅读全文
posted @
2018-02-18 18:44
松伯
阅读(541)
推荐(0) 编辑
