Kafka参数zookeeper和bootstrap-server的区别
1.区别
zookeeper - 旧版Kafka的参数
bootstrap.server - 新版Kafka的参数
2.原因
Kafka开发团队重写了ZooKeeper的Quorum控制器代码并嵌入到Kafka中。所以从v2.8版本开始,Kafka不再依赖ZooKeeper
资料:https://weibo.com/ttarticle/p/show?id=2309404634263655153710
3.特性
bootstrap.servers参数,只在启动客户端连接Kafka服务时使用。并且,即使列表里面填了多个节点,只要有一个可用就行了。
4.实例
假定有3台机,主机名是node1、node2、node3,以创建一个topic为例:
旧版(< v2.2)
kafka-topics.sh --zookeeper node1:2181,node2:2181,node3:2181 --create --topic ..
新版(>= v2.2)
kafka-topics.sh --bootstrap-server node1:9092 --create --topic ..
其中,2181是ZooKeeper的监听端口,9092是Kafka的监听端口。
旧版用--zookeeper参数,主机名(或IP)和端口用ZooKeeper的,也就是server.properties文件中zookeeper.connect属性的配置值
新旧用--bootstrap-server参数,主机名(或IP)和端口用某个节点的即可,即主机名(或主机IP):9092。
5.错误及解决方法
* 如果没有使用对应版本的命令,会报以下2种错误:
(1) 找不到zookeeper参数
zookeeper is not a recognized option
新版已不支持zookeeper参数,需要换成bootstrap-server参数
(2) 节点响应超时(请求超时)
Error while executing topic command : Timed out waiting for a node assignment. Call: xxx ERROR org.apache.kafka.common.errors.TimeoutException: Timed out waiting for a node assignment. Call: xxx
该错误是由于没有用对应版本的命令,访问了错的主机名(或IP)和端口,所以请求失败导致超时。
* 其中的xxx是指具体的动作,例如createTopics、listTopics等。
另外,如果没配置server.properties文件的listeners值,也会报以上错误。
listeners值默认是PLAINTEXT://:9092,要改为PLAINTEXT://localhost:9092或PLAINTEXT://node1:9092等
附:参考资料
https://blog.csdn.net/zollty/article/details/108975026
https://www.aboutyun.com/thread-27567-1-1.html