kafka 快速上手

概览

• Topic是Kafka数据写入操作的基本单元，可以指定副本
• 一个Topic包含一个或多个Partition，建Topic的时候可以手动指定Partition个数，个数与服务器个数相当
• 每条消息属于且仅属于一个Topic
• Producer发布数据时，必须指定将该消息发布到哪个Topic
• Consumer订阅消息时，也必须指定订阅哪个Topic的信息
• Broker 服务器

producer:生产者，做馒头的人
consumer：消费者，吃馒头的人
broker：篮子
topic：主题，topicA 肉馒头 topicB 素馒头

简单操作

kafka-topics.sh --bootstrap-server localhost:9092 --list
kafka-console-producer.sh --broker-list localhost:9092 --topic test
kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test

kafka demo

https://www.cnblogs.com/lys_013/p/11957479.html

命令行操作

topic

//列出topic
kafka-topic.sh --list --zookeeper localhost:2181

//创建topic  2个分区 2个副本
kafka-topic.sh --create --zookeeper localhost:2181  --topic test --partitions 2 --replication-factor 2

//delete
kafka-topic.sh --delete --zookeeper localhost:2181  --topic test

//describe
kafka-topic.sh --describe --topic test --zookeeper localhost:2181  

生产者

kafka-console-producer.sh --topic test --broker-list localhost:9092

消费者

kafka-console-consumer.sh --topic test --bootstrapserver -list localhost:9092
//--from-beginning