kafka direct模式

保证一次性

不适用zookeeper存储偏移量,消费的偏移量由流自己跟踪。但仍然依赖于zookeeper来协同工作。

你可以自己选择处理偏移量。信息消费的偏移量能从检查点恢复。

端到端语义:此流确保每个记录都得到有效接收转换一次,但不保证转换后的数据是否正确输出一次。 对于端到端的一次性语义,您必须确保输出操作是幂等的,或使用事务以原子方式输出记录

posted @ 2018-12-12 17:12  uuhh  阅读(744)  评论(0编辑  收藏  举报