啊啊啊啊鹏 - 博客园

2019年11月4日

摘要： 1 val properties = new Properties() 2 properties.setProperty("bootstrap.servers", "localhost:9092") 3 properties.setProperty("group.id", "consumer-gro 阅读全文

posted @ 2019-11-04 20:21 啊啊啊啊鹏阅读(509) 评论(0) 推荐(0) 编辑

flink中水位线，窗口，事件时间关系

只有注册用户登录后才能阅读该文。阅读全文

posted @ 2019-11-04 19:07 啊啊啊啊鹏阅读(7) 评论(0) 推荐(0) 编辑

数据库隔离级别，读已提交，读未提交

摘要：同样是后端开发，年薪50万和年薪20万的差距在哪里>>> 数据库事务的隔离级别有4个，由低到高依次为Read uncommitted、Read committed、Repeatable read、Serializable，这四个级别可以逐个解决脏读、不可重复读、幻读这几类问题。 √: 可能出现 ×: 阅读全文

posted @ 2019-11-04 12:41 啊啊啊啊鹏阅读(2634) 评论(0) 推荐(0) 编辑

关于Kafka的ack问题

摘要： at-most-once（可能少读） ack=0 发送不管接收成功与否 at-least-once（可能重复读）ack=-1 主从分区都接收成功事务才成功 exactly-once （正好）= at-least-once+幂等性 ack=1 主分区接收成功事务就成功阅读全文

posted @ 2019-11-04 11:23 啊啊啊啊鹏阅读(1523) 评论(0) 推荐(0) 编辑

2019年11月1日

阿里实时建表聚合时的数据倾斜常用方法解决

摘要： 1、将group by字段加hash随机字符串，再分组，这样聚合一部分相同的，再将结果group by （去掉hash字符串的字段）这时数据量就小了。 2、两个不同字段分组，再将一个字段分组，这样两次聚合，分担了后数据量就不大了阅读全文

posted @ 2019-11-01 11:31 啊啊啊啊鹏阅读(230) 评论(0) 推荐(0) 编辑

2019年10月31日

QuickBI

摘要：度量为两个时排序规则为按第一个排序，第一个大小相同时才按第二个选。阅读全文

posted @ 2019-10-31 14:58 啊啊啊啊鹏阅读(469) 评论(0) 推荐(0) 编辑