Kafka的消息不丢失
(1)Broke消息不丢失:因为有副卡relicas的存在,会不断地从leader中同步副本,索引一个broker崩溃,不会导致说话间丢失,除非只有一个副本。
(2)生产者消息不丢失:ACK机制(配置为All/-1),配置0或1可能会存在丢失。
(3)消费者消费不丢失:重点控制offset
- At-least once:一种数据可能会重复消费。
- Exactly-once:仅被消费一次。
欢迎批评指正,提出问题,谢谢!
(1)Broke消息不丢失:因为有副卡relicas的存在,会不断地从leader中同步副本,索引一个broker崩溃,不会导致说话间丢失,除非只有一个副本。
(2)生产者消息不丢失:ACK机制(配置为All/-1),配置0或1可能会存在丢失。
(3)消费者消费不丢失:重点控制offset