摘要: Kafka命令行操作 1)查看当前服务器中的所有topic [test@ip101 kafka]$ bin/kafka topics.sh zookeeper ip101:2181 list 2)创建topic [test@ip101 kafka]$ bin/kafka topics.sh zook 阅读全文
posted @ 2019-04-15 16:23 xidianzxm 阅读(243) 评论(0) 推荐(0) 编辑
摘要: Kafka集群部署 1)解压安装包 [ip101]$ tar zxvf kafka_2.11 0.11.0.0.tgz C /opt/app/ 2)修改解压后的文件名称 [ip101]$ mv kafka_2.11 0.11.0.0/ kafka 3)在/opt/app/kafka目录下创建logs 阅读全文
posted @ 2019-04-15 15:26 xidianzxm 阅读(152) 评论(0) 推荐(0) 编辑
摘要: Kafka架构图 1)Producer :消息生产者,就是向kafka broker发消息的客户端。 2)Consumer :消息消费者,向kafka broker取消息的客户端 3)Topic :可以理解为一个队列。 4) Consumer Group (CG):这是kafka用来实现一个topi 阅读全文
posted @ 2019-04-15 15:00 xidianzxm 阅读(335) 评论(0) 推荐(0) 编辑
摘要: 1、Kafka介绍 1) 在流式计算中,Kafka一般用来缓存数据,Storm通过消费Kafka的数据进行计算。 2)Kafka是一个分布式消息队列。 3)Kafka对消息保存时根据Topic进行归类,发送消息者称为Producer,消息接受者称为Consumer。 此外kafka集群有多个kafk 阅读全文
posted @ 2019-04-15 14:37 xidianzxm 阅读(158) 评论(0) 推荐(0) 编辑