摘要: Python客户端: Kafka-python 安装: pip install kafka-python Consumer端模拟代码 启动该Consumer,并多次运行Producer, 由于消息的key相同,会被存入同一个partition, 从Consumer端解析出的partition也可以确 阅读全文
posted @ 2017-12-09 21:50 shayzhang 阅读(556) 评论(0) 推荐(0) 编辑
摘要: 使用的python库: kafka-python 安装方式: pip install kafka-python 简单的模拟Producer 在集群上任选1个节点,开启console-consumer, 运行该py文件 Consumer收到该数据 阅读全文
posted @ 2017-12-09 18:20 shayzhang 阅读(1035) 评论(0) 推荐(0) 编辑
摘要: 1、集群配置思路 1)每台节点上要启动一个broker进程,因此要配置每台的server.properties broker id, log.dirs, zookeeper.connect 2) 每台broker都要连接zookeeper将状态写入,因此要配置每台的zookeeper.propert 阅读全文
posted @ 2017-12-09 13:36 shayzhang 阅读(496) 评论(0) 推荐(0) 编辑
摘要: 1、实践场景 开始前的准备条件: 1) 确认各个节点的jdk版本,将jdk升级到和kafka配套的版本(解压既完成安装,修改/etc/profile下的JAVA_HOME,source /etc/profile,重启后jdk生效) 2、单节点kafka实践 1) 启动zookeeper集群 各个节点 阅读全文
posted @ 2017-12-09 00:06 shayzhang 阅读(1377) 评论(0) 推荐(0) 编辑