dairui130

导航

2019年2月27日 #

mysql变更数据的捕获和入库

摘要: 问题:涉及状态的信息,mysql中是update的,缺少中间状态的记录。数据分析中需要这部分数据。 思路:后端服务通过监控某张表的某个字段,根据mysql的binlog文件,还原数据,发送到kafka。我们消费kafka中的数据,最终在hive的ods层形成表更数据表。 方案设计: 方案4中需要注意 阅读全文

posted @ 2019-02-27 21:15 dairui130 阅读(314) 评论(0) 推荐(0) 编辑

excel冻结窗格

摘要: 编辑excel时冻结窗格可以大大增加可读性。每个sheet都应该加上。 第一份工作的时候,上司比较严格,还因为这个挨过几次骂。所以这个技巧大家一定要掌握 方法很简单: 选中首行:视图 -- 冻结窗格 冻结窗格:选中某个单元格 -- 视图 -- 冻结窗格 阅读全文

posted @ 2019-02-27 19:56 dairui130 阅读(148) 评论(0) 推荐(0) 编辑

kafka eagel的使用

摘要: sql语句eq: 官网地址为: https://ke.smartloli.org/3.Manuals/9.KafkaSQL.html 阅读全文

posted @ 2019-02-27 11:28 dairui130 阅读(134) 评论(0) 推荐(0) 编辑