apache 大数据平台搭建(zookeeper)

一.搭建zookeeper

1.官网下载安装包

https://zookeeper.apache.org/

2.上传服务器并解压

在hadoop101上执行:
#进入安装包所在路径,执行解压命令
tar -zxvf zookeeper-3.5.7.tar.gz -C /opt/module/
#修改/opt/module/apache-zookeeper-3.5.7-bin名称为zookeeper-3.5.7
mv apache-zookeeper-3.5.7-bin/ zookeeper-3.5.7
#解压后分发到hadoop102,hadoop103
xsync.sh zookeeper-3.5.7
分发脚本见hadoop搭建的那篇博客

3.配置服务器编号

1. 在/opt/module/zookeeper-3.5.7/这个目录下创建zkData
2. 在/opt/module/zookeeper-3.5.7/zkData目录下创建一个myid的文件

vi myid
# 填写id
1
注意:添加myid文件，注意一定要在linux里面创建，在notepad++里面很可能乱码

分发文件,并在hadoop102,和hadoop103上修改id
修改myid文件中内容为2、3

4.配置zoo.cfg文件

重命名/opt/module/zookeeper-3.5.7/conf这个目录下的zoo_sample.cfg为zoo.cfg

mv zoo_sample.cfg zoo.cfg

vim zoo.cfg
#修改数据存储路径配置
ataDir=/opt/module/zookeeper-3.5.7/zkData
#增加如下配置:
server.1=hadoop101:2888:3888
server.2=hadoop102:2888:3888
server.3=hadoop103:2888:3888

保存后分发配置文件
xsync zoo.cfg

5.配置zookeeper一键启停脚本

#!/bin/bash

case $1 in
"start"){
        for i in hadoop101 hadoop102 hadoop103
        do
        echo ---------- zookeeper $i 启动 ------------
                ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh start"
        done
};;
"stop"){
        for i in hadoop102 hadoop103 hadoop104
        do
        echo ---------- zookeeper $i 停止 ------------    
                ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh stop"
        done
};;
"status"){
        for i in hadoop102 hadoop103 hadoop104
        do
        echo ---------- zookeeper $i 状态 ------------    
                ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh status"
        done
};;
esac

保存并添加可执行权限

#脚本使用:
zookeeper.sh start

#启动后查看集群状态
zookeeper.sh status

二.常用命令

进入zookeeper bin目录或者配置zookeeper环境变量后使用zkCli.sh命令进入命令行客户端

命令基本语法	功能描述
help	显示所有操作命令
ls path	使用 ls 命令来查看当前znode的子节点 ; -w 监听子节点变化 ; -s 附加次级信息
create	普通创建 ; -s 含有序列 ; -e 临时（重启或者超时消失）
get path	获得节点的值 ; -w 监听节点内容变化 ; -s 附加次级信息
set	设置节点的具体值
stat	查看节点状态
delete	删除节点
deleteall	递归删除节点

三.zookeeper远程连接

使用prettyzoo连接zookeeper集群

可以查看zookeeper节点数据:

右键节点可进行新增和删除节点操作: