随笔分类 - kafka

2-kafka日志和分区

摘要：1.topic中日志存储形式分区内部有序，但是同一分区不同partion之间的消息的顺序是无法得知的； 2.分区有序概念 kafka是消息队列，数据在写入topic是按照轮循或者hash(key)%分区数方式将数据写入，分区中是无法保证分区与分区数据的顺序，只能保证分区内部数据的顺序，但是无法得阅读全文

posted @ 2023-06-12 09:30 companion 阅读(26) 评论(0) 推荐(0) 编辑

1-kafka介绍及基础架构

摘要：1.kafka: 高吞吐量的分布式发布订阅消息系统； 1>同步变异步 2>解耦 3>削峰填谷 2.消息队列的两种工作模式: 保证到kafka中的消息被多个消费者消费，并且被相同消费者重复消费； 3.kafka集群形式 4. hash:消息的均匀分散，相同的key落入同一分区只有leader负责分区阅读全文

posted @ 2023-06-09 16:15 companion 阅读(5) 评论(0) 推荐(0) 编辑