随笔分类 -  【吗喽的搬砖日常】 / DataX

DataX - [03] 使用案例
摘要：题记部分 001 || mysql2hdfs （1）查看MySQL被迁移的数据情况 （2）根据需求确定reader为mysqlreader，writer为hdfswriter 查看reader和writer模板的方式（-r读模板；-w写模板） python bin/datax.py -r mysql 阅读全文
posted @ 2024-12-17 17:56 HOUHUILIN 阅读(36) 评论(0) 推荐(0) 编辑
DataX - [02] 安装部署
摘要：操作系统：Alibaba Cloud Linux release 3 (Soaring Falcon) Java：1.8.0_372 Python：3.6.8 => 2.7.1 一、安装部署 （1）下载DataX：http://datax-opensource.oss-cn-hangzhou.ali 阅读全文
posted @ 2024-07-31 17:07 HOUHUILIN 阅读(208) 评论(0) 推荐(0) 编辑
DataX - [01] 概述
摘要：DataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台。实现包括MySQL、Oracle、SQLServer、PostgreSQL、HDFS、Hive、ADS、HBase、TableStore（OTS）、MaxCompute（ODPS）、DRDS等各种异构数据源之间高效的数据同步功能。 Git 阅读全文
posted @ 2024-07-26 09:48 HOUHUILIN 阅读(32) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示