ETL全量多表同步简述

ETL全量多表同步简述

1. 实现需求

当原数据库的表有新增、更新、删除操作时，将改动数据同步到目标库对应的数据表。

2. 设计思路

设计总体流程图如下：

 

 

1、获取同步表名如下图：

 

 

2、循环迁移数据如下图：

 

 

3、循环迁移数据的数据处理如下图：

 

2.1. 软件安装

1、Jdk

2、Kettle同步工具

说明：

kettle7版本要求jdk必须为1.8以上。

详细可参考官网：http://community.pentaho.com/projects/data-integration/