2021 年 1月 5 日随笔档案 - 该用户很懒

2021年1月5日

摘要：转载：https://my.oschina.net/u/2828172/blog/4387485 先说结论： .setBatchSize(1) //将写入MySQL的buffer大小为1。 Flink 1.10 使用 flink-jdbc 连接器的方式与 MySQL 交互，读数据和写数据都能完成，但阅读全文

posted @ 2021-01-05 20:25 该用户很懒阅读(1531) 评论(0) 推荐(0) 编辑

借助flink来对es的写入性能进行调优

摘要：转载：https://my.oschina.net/u/2828172/blog/443419 背景说明线上业务反应使用 Flink 消费上游 kafka topic 里的轨迹数据出现 backpressure，数据积压严重。单次 bulk 的写入量为：3000/50mb/30s，并行度为 48。阅读全文

posted @ 2021-01-05 20:02 该用户很懒阅读(1369) 评论(0) 推荐(0) 编辑