Loading...

摘要: 核心概念 Job相关 Job 负责将Transformation组织在一起进而完成某一工作,通常我们需要把一个大的任务分解成几个逻辑上隔离的Job,当这几个Job都完成了,也就说明这项任务完成了。 Job Entry Job Entry是Job内部的执行单元,每一个Job Entry用于实现特定的功 阅读全文
posted @ 2022-01-09 09:19 Penn00 阅读(978) 评论(0) 推荐(0) 编辑
摘要: 一、概述 1. 设计理念 为了解决异构数据源同步问题,DataX将复杂的网状的同步链路变成了星型数据链路,DataX作为中间传输载体负责连接各种数据源。当需要接入一个新的数据源的时候,只需要将此数据源对接到DataX,便能跟已有的数据源做到无缝数据同步。 2. 架构设计 DataX本身作为离线数据同 阅读全文
posted @ 2022-01-09 09:15 Penn00 阅读(2031) 评论(0) 推荐(0) 编辑