随笔分类 - kafka
摘要：步骤1 – 验证Java安装 希望你已经在你的机器上安装了java，所以你只需使用下面的命令验证它。 java -version 如果java在您的机器上成功安装，您可以看到已安装的Java的版本。 步骤1.1 – 下载JDK 如果没有下载Java，请通过访问以下链接并下载。 http://www.
阅读全文
摘要：Kafka的数据可靠性保证 副本数据同步策略 ISR机制 ack应答机制 故障处理：HW、LEO 1. 副本数据同步策略 两种副本数据同步策略（Kafka选择第二种） 方案优点缺点 半数以上完成同步，就发送ack 延迟低 选举新的leader时，容忍n台节点的故障，需要2n+1个副本 全部完成同步，
阅读全文
摘要：生产者（1） # coding=utf-8 # 生产者脚本 import json from kafka import KafkaProducer producer = KafkaProducer(bootstrap_servers="10.44.99.103:9092") msg_dict = {
阅读全文
摘要：1、查询所有kafka的topic ./kafka-topics.sh --zookeeper localhost --list 2、查看topic的详细信息 ./kafka-topics.sh -zookeeper localhost --describe --topic shangwei123
阅读全文
摘要：Kafka常用脚本 在Kafka安装目录下（$KAFKA_HOME/bin），提供了很多内置的脚本供我们使用。使用脚本可以测试Kafka的大多数功能，下面我们就脚本的使用作出说明。 启动broker bin/kafka-server-start.sh脚本提供了启动broker的功能。 前台启动： >
阅读全文
摘要：Kafka环境搭建与简单入门 步骤一：下载代码 下载Kafka安装包，并解压。 这里下载的版本为kafka_2.11-1.0.0.tgz。 > tar -xzf kafka_2.11-1.0.0.tgz > cd kafka_2.11-1.0.0 步骤二：启动服务 Kafka使用Zookeeper存
阅读全文
