2022年10月19日
Airflow
摘要： Airflow 文档地址：https://airflow.apache.org/docs/apache-airflow/stable/index.html 动态任务 def taskList(task_conf,batch_size): task = BashOperator( task_id='' 阅读全文
posted @ 2022-10-19 19:53 Kotlin 阅读(165) 评论(0) 推荐(0) 编辑
Flink-CDC
摘要： flink-cdc flink-cdc 概述 flink-cdc 文档地址：https://ververica.github.io/flink-cdc-connectors/master/content/about.html# 依赖 <dependency> <groupId>io.netty</g 阅读全文
posted @ 2022-10-19 19:34 Kotlin 阅读(359) 评论(0) 推荐(0) 编辑
DeBezium
摘要： DeBezium DeBezium简介 DeBezium：功能远远强大与canal、maxwell。构建与kafka之上。 优点：1.处理大容量的数据 2.监控多种数据库：mysql、MongoDB、PostgreSQL、 SQL Server。canal、maxwell限于(mysql) 方式一： 阅读全文
posted @ 2022-10-19 15:52 Kotlin 阅读(766) 评论(0) 推荐(0) 编辑
Maxwell
摘要： Maxwell Maxwell介绍 Maxwell：实时读取mysql的Binlog，生成json格式的消息，发送给kafka、redis等 下载地址：https://github.com/zendesk/maxwell/releases/download/v1.29.2/maxwell-1.29. 阅读全文
posted @ 2022-10-19 09:18 Kotlin 阅读(336) 评论(0) 推荐(0) 编辑
Live2D