2022年1月20日

3. 数仓建模理论 - ODS层建模思想

摘要： 存储数据类型：HDFS用户行为日志、HDFS业务数据 用户行为日志建表思想：建单表，1个字段存储日志。每条数据与日志表对应。 分区规划：按天分区， 业务数据建表思想：取决于同步哪些业务表。 表结构：与业务表结构一致。 分区规则：按天分区。 DIM/DWD 阅读全文

posted @ 2022-01-20 15:46 挣扎的发际线 阅读(49) 评论(0) 推荐(0) 编辑

2.数仓建模理论

摘要： 建模理论：关系建模(ER建模)、纬度建模(DIM建模) 关系建模严格遵守三范式(3NF)理论 ,也因为三范式的特性，使关系模型较为松散、零碎、物理表数量多，数据冗余低，数据一致性容易得到保证，但是在大数据场景查询效率较低。 1. 属性不可分割：单表一个字段的数据不可分割成多个字段，即数据原子性要求。 阅读全文

posted @ 2022-01-20 15:29 挣扎的发际线 阅读(237) 评论(0) 推荐(0) 编辑

导航