RICH-ATONE

2022年4月1日 #

flink 指定时间消费kafka

摘要： 如果消费位置不准确了，或者checkpoint/savepoint损坏无法恢复，可以直接在Flink中方便指定消费者位置； 如下示例直接指定消费的时间戳即可。（Flink Sql好像还不支持，需要单独写UDF实现） 参考： flink 根据时间消费kafka 阅读全文

posted @ 2022-04-01 15:51 RICH-ATONE 阅读(658) 评论(0) 推荐(0) 编辑

awk去重统计

摘要： 示例：TakeSample||e28ebbc2-238f-3f23-ae31-fd8122adecad|MuMu|6.0.1|wifi|||StartUp|com.oathgirls.gp|android 。。。。 取第三列设备并去重统计； grep "StartUp" | awk -F'|' '{ 阅读全文

posted @ 2022-04-01 11:52 RICH-ATONE 阅读(545) 评论(0) 推荐(0) 编辑

导航