kafka集群搭建-docker

集群
https://blog.csdn.net/hfthxfhjy/article/details/127675020
单例
https://blog.csdn.net/qq_31728357/article/details/119297596
操作kafka时注意 ip:port/path

docker pull wurstmeister/zookeeper
docker run -d --log-driver json-file --log-opt max-size=100m --log-opt max-file=2 --name zookeeper -p 2181:2181 -v /etc/localtime:/etc/localtime wurstmeister/zookeeper

docker pull wurstmeister/kafka

docker run -d --log-driver json-file --log-opt max-size=100m --log-opt max-file=2 --name kafka -p 9092:9092 -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=192.168.133.131:2181/kafka -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.133.131:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 -v /etc/localtime:/etc/localtime wurstmeister/kafka

参数说明:
-e KAFKA_BROKER_ID=0 在kafka集群中,每个kafka都有一个BROKER_ID来区分自己
-e KAFKA_ZOOKEEPER_CONNECT=192.168.133.131:2181/kafka 配置zookeeper管理kafka的路径172.16.0.13:2181/kafka
-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.133.131:9092 把kafka的地址端口注册给zookeeper,如果是远程访问要改成外网IP,类如Java程序访问出现无法连接。
-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 配置kafka的监听端口
-v /etc/localtime:/etc/localtime 容器时间同步虚拟机的时间


kafka命令汇总
http://www.taodudu.cc/news/show-64232.html?action=onClick
创建topic
./kafka-topics.sh --create --zookeeper 192.168.133.131:2181/kafka --replication-factor 1 --partitions 1 --topic test
查看所有topic
./kafka-topics.sh --list --zookeeper 192.168.133.131:2181/kafka
生产者
./kafka-console-producer.sh --broker-list 192.168.133.131:9092 --topic test
消费者 [--property print.key]显示key [--from-beginning]从开始位置消费
./kafka-console-consumer.sh --bootstrap-server 192.168.133.131:9092 --topic test --property print.key --from-beginning
标记删除
./kafka-topics.sh --delete --topic test --zookeeper 192.168.133.131:2181/kafka

posted on 2023-05-18 21:00  木林coder  阅读(41)  评论(0编辑  收藏  举报

导航