01 CentOS7中安装kafka并测试生产者消费者
kafka是大数据组件中的消息队列,俗语有云:系统卡不卡,全看kafka。kafka的使用能极大的提升的系统吞吐量。本文将阐述在CentOS7中安装kafka。
1 系统、软件以及前提约束
- CentOS 7 64 工作站 作者的机子ip是192.168.100.200,请读者根据自己实际情况设置
- jdk1.8.0_162 已经安装完毕,并配置环境变量,作者的环境变量为/root/jdk1.8.0_162,请读者根据自己实际情况设置
jdk安装 https://www.jianshu.com/p/08b94347bb8a - zookeeper已经安装完毕
https://www.jianshu.com/p/45e84fc9d02f - kafka_2.12-0.11.0.2
kafka下载链接:https://pan.baidu.com/s/1c_skDYabCRSkS5hRUB6lFQ
提取码:a00t
kafka_2.12-0.11.0.2.tgz已上传到192.168.100.200的/root目录下 - xshell客户端
- 为去除权限对操作的影响,所有操作都以root进行
2 操作
- 1 使用xshell登录到192.168.100.200
- 2 解压kafka_2.12-0.11.0.2.tgz
# 进入家目录
cd
# 解压
tar -xvf kafka_2.12-0.11.0.2.tgz
- 3 启动服务、创建topic、启动生产者和消费者
# 确保没有其他程序占用2181端口,启动服务
cd /root/kafka_2.12-0.11.0.2/bin
./zookeeper-server-start.sh ../config/zookeeper.properties &
./kafka-server-start.sh ../config/server.properties &
# 创建topic
./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test &
# 查看创建的topic
./kafka-topics.sh --list --zookeeper localhost:2181
# 启动生产者
./kafka-console-producer.sh --broker-list localhost:9092 --topic test
# 再打开一个窗口,登录,进入kafka启动目录,启动消费者
./kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning
- 4 测试
在生产者窗口输入子串,在消费者窗口观察输出。
以上就是在CentOS7中测试你kafka的生产者、消费者之间的消息传输。