摘要: 1、数据仓库ODS层 数据仓库ODS层也称为操作数据源层,是数据仓库中的一个核心组成部分。该层主要用于保存原始数据,完成数据积存,通常反映了企业业务系统中的最新操作,同时也是进行数据仓库的基础。 数据仓库ODS层通常采用可靠的数据仓库ETL工具为数据仓库提供数据,以此使源数据和数据仓库之间保持同步。 阅读全文
posted @ 2024-03-19 11:31 西伯利亚的狼 阅读(25) 评论(0) 推荐(0) 编辑
摘要: 数据仓库建设方案 传统数据仓库大数据数据仓库 传统数仓 由关系型数据库组成MPP(大规模并行处理)集群 在数据没有达到某个量级的时候是非常优秀的解决方案,继承了单机数据库优异的性能, 大数据处理仓库 利用大数据天然的扩展性,完成海量数据的存放 将SQL转换为大数据计算引擎任务,完成数据分析 区别 M 阅读全文
posted @ 2024-03-19 11:31 西伯利亚的狼 阅读(25) 评论(0) 推荐(0) 编辑
摘要: 数据仓库产生的背景 1、历史数据积存 历史数据使用频率低,堆积在业务库中,导致性能下降,定期转移到特定的地方,就是数据仓库。高频数据支持线上业务正常运行,如果需要历史数据,再从数据仓库中操作 2、数据分析 数仓面向于业务分析,业务数据库面向于业务 数据仓库(Data Warehouse,DW) 由数 阅读全文
posted @ 2024-03-19 11:30 西伯利亚的狼 阅读(13) 评论(0) 推荐(0) 编辑