随笔分类 - MQ
摘要：一、工作流程 Kafka 中消息是以 topic 进行分类的，生产者生产消息，消费者消费消息，都是面向 topic 的。 topic 是逻辑上的概念，而 partition 是物理上的概念，每个 partition 对应于一个 log 文件，该 log 文件中存储的就是 producer 生产的数据
阅读全文
摘要：Kafka Eagle 是一款开源的 Kafka 集群监控系统。 一、下载 https://download.kafka-eagle.org/ 二、安装 # 解压 tar -zxf /opt/kafka-eagle-bin-1.3.9.tar.gz -C /opt/ tar -zxf /opt/ka
阅读全文
摘要：Topic：可以理解为一个队列，生产者和消费者面向的都是一个 topic。 Partition：主要为了做负载，实现扩展性，一个非常大的 topic 可以分布到多个 broker（即服务器）上，一个 topic 可以分为多个 partition，每个 partition 是一个有序的队列。 一、to
阅读全文
摘要：一、集群规划 h136 h138 h140 zk zk zk kafka kafka kafka 二、下载 https://kafka.apache.org/downloads.html Kafka 由 Scala 编写，kafka_2.12-2.3.0：其中 2.12 为 Scala 版本，2.3
阅读全文
摘要：Kafka 是一个分布式的基于发布/订阅模式的消息队列（Message Queue），主要应用于大数据实时处理领域。 Kafka 中，客户端和服务器之间的通信是通过 TCP 协议完成的。 一、传统消息队列的应用场景 二、使用消息队列的好处 1）解耦 允许你独立的扩展或修改两边的处理过程，只要确保它们
阅读全文
