Debezium 实时同步数据库
Debezium 是一个 CDC(Changelog Data Capture,变更数据捕获)技术的缩写,它可以将源数据库 (Source) 的增量变动记录,同步到一个或多个数据目的 (Sink)。在同步过程中,还可以对数据进行一定的处理,例如分组 (GROUP BY)、多表的关联 (JOIN) 等。比如把来自 MySQL、PostgreSQL、Oracle、Microsoft SQL Server 和许多其他数据库的更改实时流式传输到 Kafka 中。 Debezium 为变更日志提供了统一的格式结构,并支持使用 JSON 和 Apache Avro 序列化消息。
REFER:
https://debezium.io/documentation/
https://github.com/debezium/debezium
https://pulsar.apache.org/docs/en/io-cdc-debezium/
https://mp.weixin.qq.com/s/_67XXbPAawegCP08W8FHIQ
https://wufc.info/post/streaming/debezium/
https://mp.weixin.qq.com/s/q_O6NUYFrtibG_ytuRHtgQ