大数据学习（二）

一、大数据相关产品矩阵（数据采集、数据存储、数据管理、数据服务）

1.数据集成管理

2.数据交换管理

3.实时大数据管理

4.元数据管理

元数据管理平台技术白皮书：

元数据的平台架构分为5层：数据源层、采集层、数据层、功能层和访问层。

 

数据源层：指的是元数据管理平台所支持的元数据来源的方式，包括：数据库类型、ETL类型、文件类型、业务系统类型

采集层：针对不同的数据源提供丰富的适配器，实现端到端的自动化采集。包括：sqlserver、oracle、mysql、postgresql、petabase、ODI、Excel、亿信BI

数据层：元数据层是基于关系数据库的元数据存储，用于实现元数据和元模型的数据物理存储。

功能层：元模型增删改查及版本发布功能、元数据增删改查及版本管理

访问层：给用户提供访问控制服务。

（1）元模型管理：对元模型的基本信息、属性、父子关系、依赖关系、组合关系的增删改查操作。

 

5.数据标准管理

6.数据质量管理

7.主数据管理

8.数据资产管理

9.数据安全管理

10.数据生命周期管理

 一、数据治理体系学习