mysql变更数据的捕获和入库
摘要:
问题:涉及状态的信息,mysql中是update的,缺少中间状态的记录。数据分析中需要这部分数据。 思路:后端服务通过监控某张表的某个字段,根据mysql的binlog文件,还原数据,发送到kafka。我们消费kafka中的数据,最终在hive的ods层形成表更数据表。 方案设计: 方案4中需要注意 阅读全文
posted @ 2019-02-27 21:15 dairui130 阅读(314) 评论(0) 推荐(0) 编辑