随笔分类 -  zookeeper

Zookeeper QuickStart
摘要：环境版本 操作系统：CentOS release 6.6 (Final) java版本: jdk1.8 zookeeper版本: zookeeper-3.4.11 一、 安装jdk 此处省略 二、 安装zookeeper 2.1 下载源码包，并解压 官网下载地址：http://www.apache. 阅读全文
posted @ 2020-08-13 15:12 哈喽哈喽111111 阅读(337) 评论(0) 推荐(0) 编辑
zookeeper启动占用8080端口，跟HDFS默认使用的8080端口冲突
摘要：zookeeper最近的版本中有个内嵌的管理控制台是通过jetty启动，也会占用8080 端口。 通过查看zookeeper的官方文档，发现有3种解决途径： （1）.删除jetty。 （2）修改端口。 修改方法的方法有两种，一种是在启动脚本中增加 Dzookeeper.admin.serverPor 阅读全文
posted @ 2019-10-12 10:29 哈喽哈喽111111 阅读(864) 评论(0) 推荐(0) 编辑
使用canal获取mysql的binlog传输给kafka，并交由logstash获取实验步骤
摘要：1. 实验环境 CPU:4 内存：8G ip:192.168.0.187 开启iptables防火墙 关闭selinux java =1.5 使用yum方式安装的java,提前配置好JAVA_HOME环境变量 2. MySQL信息 mysql账号 root MySQL密码 liykpntuu9?C 阅读全文
posted @ 2019-10-08 18:02 哈喽哈喽111111 阅读(2333) 评论(0) 推荐(0) 编辑
使用python操作zookeeper
摘要：kazoo 介绍 zookeeper的开发接口以前主要以java和c为主，随着python项目越来越多的使用zookeeper作为分布式集群实现，python的zookeeper接口也出现了很多，现在主流的纯python的zookeeper接口是kazoo。因此如何使用kazoo开发基于python 阅读全文
posted @ 2019-09-24 17:04 哈喽哈喽111111 阅读(11582) 评论(0) 推荐(1) 编辑
更改：把redis替换成kafka
摘要：之前的流程是：filebeat，redis，logstash，elasticsearch 现在的流程是：filebeat，Kafka(zookeeper)，logstash，elasticsearch zookeeper集群，使用ZK UI提供的web界面 kafka集群，使用的是kafka eag 阅读全文
posted @ 2019-09-23 18:15 哈喽哈喽111111 阅读(992) 评论(0) 推荐(0) 编辑
mysql+canal+kafka+elasticsearch构建数据查询平台
摘要：1. 实验环境 CPU:4 内存：8G ip:192.168.0.187 开启iptables防火墙 关闭selinux java =1.5 使用yum方式安装的java,提前配置好JAVA_HOME环境变量 2. MySQL信息 mysql账号 root MySQL密码 liykpntuu9?C 阅读全文
posted @ 2019-09-20 18:28 哈喽哈喽111111 阅读(5685) 评论(3) 推荐(0) 编辑
zookeeper集群搭建
摘要：本例搭建的是伪集群模式，即一台机器上启动三个zookeeper实例组成集群，真正的集群模式无非就是实例IP地址不同，搭建方法没有区别 配置JAVA环境，检验环境： `echo ${JAVA_HOME}` 阅读全文
posted @ 2019-09-20 14:15 哈喽哈喽111111 阅读(607) 评论(0) 推荐(0) 编辑
使用zookeeper报错 stat is not executed because it is not in the whitelist. envi is not executed because it is not in the whitelist.
摘要：在使用四字命令或者zk ui界面查看zookeeper集群时，出现如下提示： 解决办法 阅读全文
posted @ 2019-09-20 10:41 哈喽哈喽111111 阅读(4163) 评论(0) 推荐(0) 编辑
使用python的kazoo模块连接zookeeper实现最基本的增删改查
摘要：kazoo的官方文档地址：https://kazoo.readthedocs.io/en/latest/index.html 阅读全文
posted @ 2019-09-19 17:16 哈喽哈喽111111 阅读(1531) 评论(0) 推荐(0) 编辑
zk ui安装 (选装，页面查看zk的数据)
摘要：```bash # 使用WEB UI查看监控集群-zk ui安装 cd /usr/local git clone https://github.com/DeemOpen/zkui.git yum install -y maven # 更换使用阿里云maven源 vim /etc/maven/settings.xml nexus-aliyun ... 阅读全文
posted @ 2019-09-19 16:29 哈喽哈喽111111 阅读(690) 评论(0) 推荐(0) 编辑
安装运行zookeeper的坑
摘要：从官网下载zookeeper的地址中有俩文件 一个是apache zookeeper 3.5.5.tar.gz ，另一个是apache zookeeper 3.5.5 bin.tar.gz 若是使用前者，运行的话会报错：Error: Could not find or load main class 阅读全文
posted @ 2019-09-18 17:01 哈喽哈喽111111 阅读(961) 评论(0) 推荐(0) 编辑