Kafka-硬件的选择
摘要：Kafka-硬件的选择 磁盘吞吐量（重要，影响生产者） 生产者客户端的性能直接受到服务器端磁盘吞吐量的影响。 生产者生成的消息必须被提交到服务器保存，大多数客户端在发送消息后会一直等待，直到至少一个服务器确认消息已经成功提交为止。 磁盘写入速度越快，生成消息的延迟就越低。 磁盘容量（制约集群规模）
阅读全文
posted @ 2020-03-29 11:54
随笔分类 - Kafka
Kafka-broker主要配置
摘要：Kafka-broker配置 常规配置 broker.id 每个broker都需要有一个标识符，使用broker.id来表示。它的默认值是0，也可以被设置成其它任意整数。这个值在整个kafka集群里必须是唯一的。 port 默认配置中，kafka会监听9092端口。port可以改为任意可用端口。 需
阅读全文
posted @ 2020-03-26 22:43
Kafka-安装使用
摘要：Kafka-安装使用 kafka使用zookeeper保存broker的元数据，所以安装kafka之前需要先安装zookeeper 安装zookeeper 1.准备安装包，解压 此处使用 zookeeper-3.4.9 2.编辑配置文件 在zookeeper根目录下，新建一个数据文件夹data(我用
阅读全文
posted @ 2020-03-25 23:07
Kafka-为什么选择kafka(kafka的优点)
摘要：Kafka-为什么选择kafka(kafka的优点) 多个生产者 kafka可以无缝的支持多个生产者，不管客户端在使用单个主题还是多个主题。所以它很适合用来从多个前端系统手机数据，并以同一的格式对外提供数据。 例如:一个包含了多个微服务的网站，可以为页面视图创建一个单独的主题，所有服务都以相同的消息
阅读全文
posted @ 2020-03-25 21:57
Kafka-常用术语(消息、生产者、消费者、集群、broker解释)
摘要：Kafka-常用术语(消息、生产者、消费者、集群、broker解释) 消息和批次 kafka的数据单元被称为消息。类似于数据库表中的一行数据。 消息由字节数组组成，所以对于kafka来说，消息里的数据没有特别的格式或含义。 消息可以有一个可选的元数据，也就是键，键也是一个字节数组，当消息以一种可控的
阅读全文
posted @ 2020-03-24 21:28
