随笔分类 - 【20】kafka
摘要：环境 虚拟机：VMware 10 Linux版本：CentOS-6.5-x86_64 客户端：Xshell4 FTP：Xftp4 jdk1.8 kafka_2.11-0.11.0.0 zookeeper-3.4.6 生产者： 消费者：
阅读全文
摘要：环境 虚拟机：VMware 10 Linux版本：CentOS-6.5-x86_64 客户端：Xshell4 FTP：Xftp4一、kafka是什么？ (1)kafka是一个高吞吐的分部式消息系统.(2)消息列队常见应用场景：系统之间解耦合;峰值压力缓冲;异步通信; 二、kafka特点：1、生产者消
阅读全文
摘要：一、操作日志 首先附上kafka 操作日志配置文件：log4j.properties 根据相应的需要设置日志。 其次 kafka默认打印GC日志，如下， 生产是不需要的 需要关掉，kafka home bin目录下面有个kafka-run-class.sh脚本 vim编辑一下 将参数 KAFKA_G
阅读全文
摘要：kafka集群的性能受限于JVM参数、服务器的硬件配置以及kafka的配置，因此需要对所要部署kafka的机器进行性能测试，根据测试结果，找出符合业务需求的最佳配置。 1、kafka broker jVM参数kafka broker jVM 是由脚本kafka-server-start.sh中参数K
阅读全文
摘要：1.介绍 一般情况下，功能简单的kafka项目 使用运维命令+kafka Offset Monitor 就足够用了。 2、使用2.1 部署 github下载jar包 KafkaOffsetMonitor-assembly-0.2.0.jar 地址：https://github.com/quantif
阅读全文
摘要：kafka集群维护一、kafka集群启停#启动kafka/home/cluster/kafka211/bin/kafka-server-start.sh -daemon /home/cluster/kafka211/config/server.properties #关闭kafka/home/clu
阅读全文
摘要：基于kafka: kafka_2.11-0.11.0.0.tgz kafka-eagle-bin-1.2.1.tar.gz 1.下载解压 tar -zxvf kafka-eagle-bin-1.2.1.tar.gz -C /home/cluster 2.配置 vim /home/cluster/ka
阅读全文
摘要：部署环境 jdk7 kafka_2.10-0.9.0.1 xshell4 rhel-server-6.5 kafka-manager 是功能比较多的kafka管控工具。 安装方法一 安装方法二 步骤一：解压 unzip kafka-manager-1.0-SNAPSHOT.zip -d /usr/l
阅读全文
摘要：安装环境 jdk1.7 zookeeper-3.4.5（参考 https://www.cnblogs.com/cac2020/p/9426531.html） VM虚拟机redhat6.5-x64：192.168.1.200 192.168.1.201 192.168.1.202 kafka_2.10
阅读全文
