会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
huxi_2b
We are bypassing the talent and stopping at the station of hard work.
博客园
首页
新随笔
联系
订阅
管理
2020年9月15日
【原创】Kafka Consumer多线程消费
摘要: 上一篇《Kafka Consumer多线程实例续篇》修正了多线程提交位移的问题,但依然可能出现数据丢失的情况,原因在于多个线程可能拿到相同分区的数据,而消费的顺序会破坏消息本身在分区中的顺序,因而扰乱位移的提交。这次我使用KafkaConsumer的pause和resume方法来防止这种情形的发生。
阅读全文
posted @ 2020-09-15 09:51 huxihx
阅读(7820)
评论(15)
推荐(7)
编辑
公告