kafka保证数据不丢失机制
kafka如何保证数据的不丢失
1、生产者如何保证数据的不丢失:消息的确认机制,使用ack机制我们可以配置我们的消息不丢失机制为-1,保证我们的partition的leader与follower都保存好了数据
2、消费者如何保证不重复消费数据:offset偏移量,记录了我们的消息消费的偏移量,新版本偏移量记录在了一个topic里面
3、broker如何保证数据的不丢失:partition的副本机制
1、生产者如何保证数据的不丢失:消息的确认机制,使用ack机制我们可以配置我们的消息不丢失机制为-1,保证我们的partition的leader与follower都保存好了数据
2、消费者如何保证不重复消费数据:offset偏移量,记录了我们的消息消费的偏移量,新版本偏移量记录在了一个topic里面
3、broker如何保证数据的不丢失:partition的副本机制