2021年7月5日
datax 批量同步和传输表
有时候，进行全量同步表时，涉及的表会比较多，可以使用参数定义表明的方式 进行调用datax的配置文件，这样就不需要每次新增一张表就写一个配置文件 { "job": { "content": [ { "reader": { "name": "oraclereader", "parameter": { Read More
posted @ 2021-07-05 17:17 欣欣姐 Views(3930) Comments(1) Diggs(2) Edit
datax oracle数据同步到oracle （异库同步传输）
由于要实现两个不同数据源的同步，datax可以高效的传输，故在做海量数据同步和迁移时，可以考虑此方法，其中json文件如下。 { "job": { "setting": { "speed": { "channel": 3, "byte": 1048576 }, "errorLimit": { "re Read More
posted @ 2021-07-05 16:26 欣欣姐 Views(1983) Comments(0) Diggs(1) Edit
Datax 从Oracle导入数据到Hive
需要将oracle的数据导入到Hive上去，其实导入到hdfs和导入到hive的配置差不多。 查看集群上的文件 附上截图配置文件代码 { "job": { "setting": { "speed": { "channel": 3, "byte": 1048576 }, "errorLimit": { Read More
posted @ 2021-07-05 16:15 欣欣姐 Views(1904) Comments(1) Diggs(0) Edit