datax编译以及测试流程
简单记录一下
1、编译
mvn -U clean package assembly:assembly '-Dmaven.test.skip=true'
缺少
<!-- <dependency>-->
<!-- <groupId>org.pentaho</groupId>-->
<!-- <artifactId>pentaho-aggdesigner-algorithm</artifactId>-->
<!-- <version>5.1.5-jhyde</version>-->
<!-- <scope>test</scope>-->
<!-- </dependency>-->
<!-- <!– https://mvnrepository.com/artifact/eigenbase/eigenbase-properties –>-->
<!-- <dependency>-->
<!-- <groupId>eigenbase</groupId>-->
<!-- <artifactId>eigenbase-properties</artifactId>-->
<!-- <version>1.1.4</version>-->
<!-- </dependency>-->
2、测试流程
2.1、主类
2.2 测试json
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 | { "job" : { "content" : [ { "reader" : { "name" : "mysqlreader" , "parameter" : { "connection" : [ { "jdbcUrl" : [ "jdbc:mysql://localhost:3306/data1?serverTimezone=Asia/Shanghai&useLegacyDatetimeCode=false&useSSL=false&nullNamePatternMatchesAll=true&useUnicode=true&characterEncoding=UTF-8" ], "querySql" :[ "SELECT c2.name AS countyName,c1.name AS cityName FROM county c2 LEFT JOIN city c1 ON c2.cityId = c1.id" ] } ], "password" : "123456" , "username" : "root" } }, "writer" : { "name" : "mysqlwriter" , "parameter" : { "column" : [ "countyName" , "cityName" ], "connection" : [ { "jdbcUrl" : "jdbc:mysql://localhost:3306/data2?serverTimezone=Asia/Shanghai&useLegacyDatetimeCode=false&useSSL=false&nullNamePatternMatchesAll=true&useUnicode=true&characterEncoding=UTF-8" , "table" : [ "county_info" ] } ], "password" : "123456" , "preSql" : [], "session" : [], "username" : "root" , "writeMode" : "insert" } } } ], "setting" : { "speed" : { "channel" : "10" } } } } |
2.3、调试前需要先安装datax,datax.home指向的路径就是datax安装路径
3、
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· winform 绘制太阳,地球,月球 运作规律
· 超详细:普通电脑也行Windows部署deepseek R1训练数据并当服务器共享给他人
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· AI 智能体引爆开源社区「GitHub 热点速览」
· 写一个简单的SQL生成工具