在docker 下安装kafka 和zookeeper

1拉取kafka 和zookerper 镜像

docker pull wurstmeister/zookeeper

pull wurstmeister/kafka

 

2创建zookeeper容器

docker run -d --name zookeeper -p 2181 -t wurstmeister/zookeeper 

3创建kafka 容器

docker run -d --name kafka --publish 9092:9092 --link zookeeper --env KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 --env KAFKA_ADVERTISED_HOST_NAME=127.0.0.1 --env KAFKA_ADVERTISED_PORT=9092 --volume /etc/localtime:/etc/localtime wurstmeister/kafka:latest 

 

4进入kafka 容器

docker exec -it 20c9d9a25ba4 /bin/bash  

5进入opt/kafka_2.13-2.7.0/目录

创建topic 

kafka-topics.sh --create --zookeeper zookeeper:2181 --replication-factor 1 --partitions 1 --topic mykafka 

6创建生产者

kafka-console-producer.sh --broker-list localhost:9092 --topic mykafka 

7创建消费者

kafka-console-consumer.sh --bootstrap-server 127.0.0.1:9092  --topic mykafka   --from-beginning

在消费的时候特别注意-server 下的地址和端口

如果生产者创建成功，但是不能消费，始终网络错误的话可以检查下server 的地址和端口是否成功

可以去zookeper 下查看

先执行进入容器

docker exec -it zookeeper bash bin/zkCli.sh 

查看brokers 信息

ls /brokers/ids 

获取brokers 的信息

get /brokers/ids/1001 

 

 详细的解决方案参考博文：https://www.cnblogs.com/hellxz/p/why_cnnect_to_kafka_always_failure.html 

 

8创建kafka-exporter 

 

docker run -ti -d  --rm -p 9308:9308 danielqsj/kafka-exporter --kafka.server=127.0.0.1:9092 



启动后在浏览器中输入localhost：9308查看节点信息

 

 

10 启动prometheus 

启动后在浏览器中输入 localhost:9090 查看exporter 节点是否配置成功

 

  

11启动garafa 

倒入7589模版就可以查看到数据节点信息了