zookeeper简介
简介
特点
数据结构
统一命名服务
在分布式环境下,对应用或服务进行统一命名,以便识别。(将各个功能差不多的ip地址(143,293,12,2等)统一为一个域名(www.baidu.com))
统一配置管理
分布式环境下要求所有的节点配置一致,可将配置信息写入zookeeper的一个节点下,各个客户端服务器都会去监听这个节点,当节点配置信息修改时zookeeper会通知各个客户端服务器,就可以同步配置统一。
统一集群管理
服务器节点动态上下线
客户端能通过zookeeper实时洞察到服务器上下线的变化,以便使用上线的服务器,而不是已下线的。
代码
软负载均衡
在zookeeper记录服务器访问数,让访问数最少的服务器去处理最新的客户端请求。
选举机制
面试重点
- 半数机制:集群中半数以上机器存活,集群可用。所以 Zookeeper 适合安装奇数台服务器。例如,5台服务器有3台存活,集群可用,而只有2台存活,集群不可用。
- Zookeeper 虽然在配置文件中并没有指定 Master 和 Slave。 但是, Zookeeper 工作时,是有一个节点为 Leader,其他则为 Follower, Leader 是通过内部的选举机制临时产生的。
- 选举的过程:选举半数及以上当选,从头到尾顺序开始,先选自己,发现自己当不了,再选后一位直到有节点当选。
节点类型
- 持久(Persistent):客户端和服务器端断开连接后, 创建的节点不删除
- 短暂(Ephemeral):客户端和服务器端断开连接后, 创建的节点自己删除
- 持久化目录节点 客户端与Zookeeper断开连接后,该节点依旧存在
- 持久化顺序编号目录节点 客户端与Zookeeper断开连接后, 该节点依旧存在, 只是Zookeeper给该节点名称进行顺序编号
- 临时目录节点 客户端与Zookeeper断开连接后, 该节点被删除
- 临时顺序编号目录节点 客户端与Zookeeper断开连接后,该节点被删除,只是Zookeeper给该节点名称进行顺序编号。
说明:创建znode时设置顺序标识,znode名称后会附加一个值,顺序号是一个单调递增的计数器,由父节点维护
注意:在分布式系统中,顺序号可以被用于为所有的事件进行全局排序, 这样客户端可以通过顺序号推断事件的顺序
监听器
面试重点
监听原理详解:
- 首先要有一个main()线程
- 在main线程中创建Zookeeper客户端, 这时就会创建两个线程, 一个负责网络连接通信( connet ), 一个负责监听( listener )。
- 通过connect线程将注册的监听事件发送给Zookeeper。
- 在Zookeeper的注册监听器列表中将注册的监听事件添加到列表中。
- Zookeeper监听到有数据或路径变化, 就会将这个消息发送给listener线程。
- listener线程内部调用了process()方法。
常见的监听:
- 监听节点数据的变化
get path [watch]
- 监听子节点增减的变化
ls path [watch]
代码
写数据流程
- Client 向 ZooKeeper 的Server1 上写数据,发送一个写请求。
- 如果Server1不是Leader,那么Server1 会把接受到的请求进一步转发给Leader,因为每个ZooKeeper的Server里面有一个是Leader。这个Leader 会将写请求广播给各个Server, 比如Server1和Server2,各个Server会将该写请求加入待写队列,并向Leader发送成功信息。
- 当Leader收到半数以上 Server 的成功信息, 说明该写操作可以执行。Leader会向各个Server 发送提交信息,各个Server收到信息后会落实队列里的写请求, 此时写成功。
- Server1会进一步通知 Client 数据写成功了,这时就认为整个写操作成功