百里登风

导航

2022年10月18日

Dinky的使用——csv2mysql

摘要: 要求:通过dinky把csv的文本文件里面的数据同步到mysql数据库里面 一、添加依赖包 在dinky的pulgins和flink的lib目标下添加csv的依赖包,添加完后重启dink和flink 下载地址可参考:https://www.bookstack.cn/read/ApacheFlink- 阅读全文

posted @ 2022-10-18 19:21 百里登峰 阅读(180) 评论(0) 推荐(0) 编辑

Dinky的使用——kafka2mysql

摘要: 需求:通过在kafka的topic里面传入json串,再把数据同步到mysql中,这个也可以作为半结构化数据同步的案例 一、添加依赖包 将依赖包放到dinky的pulgins目录和flink的lib目录下,并重启dinky和flink 依赖包下载地址参考:https://www.bookstack. 阅读全文

posted @ 2022-10-18 18:32 百里登峰 阅读(755) 评论(0) 推荐(0) 编辑

Dinky的使用——hbase2mysql

摘要: 要求:通过dinky把hbase的表数据导到mysql中,这种通常是用来模拟半结构化数据同步的场景 因为hbase是基于列存储的,不需要每个列都是有值的,通过列簇管理列,当然想了解hbase的表结构可以参考:https://www.cnblogs.com/braveym/p/7708332.html 阅读全文

posted @ 2022-10-18 17:52 百里登峰 阅读(828) 评论(0) 推荐(0) 编辑

Dinky使用——mysql2clickhouse

摘要: 要求:通过Dinky把mysql的数据导到clickhouse数据库 对于dinky的安装部署,以及dinky集成clickhouse数据库需要那些jar包可以参考:https://www.cnblogs.com/braveym/p/16455534.html 这里我需要提醒,需要我们提前把mysq 阅读全文

posted @ 2022-10-18 16:41 百里登峰 阅读(452) 评论(0) 推荐(1) 编辑