随笔分类 -  大数据

【转载】 Hive 分区表
摘要：一、分区表概述 分区表也是内部表，创建表时可以同时为表创建一个或多个分区，这样我们在加载数据时为其指定具体的分区，查询数据时可以指定具体的分区从而提高效率，分区可以理解为表的一个特殊的列。关键字是partitioned。 分区表实际上是将表文件分成多个有标记的小文件方便查询。 二、创建分区表 这里我 阅读全文
posted @ 2021-05-31 10:47 罗木木在数羊 阅读(773) 评论(0) 推荐(0) 编辑
【数据仓库】分层概念,ODS,DM,DWD,DWS,DIM的概念
摘要：转自：https://blog.csdn.net/pmdream/article/details/113601956 一. 各种名词解释 1.1 ODS是什么？ ODS层最好理解，基本上就是数据从源表拉过来，进行etl，比如mysql 映射到hive，那么到了hive里面就是ods层。 ODS 全称 阅读全文
posted @ 2021-05-27 15:48 罗木木在数羊 阅读(4230) 评论(0) 推荐(1) 编辑

点击右上角即可分享
微信分享提示