owenqing 联系🪐

03 2023 档案

关于 kafka 的一些经验
摘要：1. kafka 高性能原因 PageCache + 顺序写磁盘 (读与写) producer 请求：Server端的I/O线程统一将请求写到操作系统的 PageCache 后立即返回，当消息达到一定阈值后, Kafka 应用本身会操作系统内核会触发强制刷盘 comsumer 请求: 主要利用了 z 阅读全文
posted @ 2023-03-29 19:51 owenqing 阅读(129) 评论(0) 推荐(0) 编辑
Flink 自定义 SQL Connector
摘要：1. 启程 flink 本身提供了丰富的 sql connector, 一般不需要用户自己定义。但是在某些特殊的情况下需要手动实现针对实际场景的 sql connector。 最近在实践中遇到了两个比较极端的场景, 无法通过简单的 sql connector 实现: 业务1: 逻辑上将数据分写入到一 阅读全文
posted @ 2023-03-24 23:49 owenqing 阅读(742) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示