随笔分类 - Message Queue

Kafka数据丢失和数据重复的原因和解决办法

摘要：数据丢失的原因 Kafka 消息发送分同步 (sync)、异步 (async) 两种方式，默认使用同步方式，可通过 producer.type 属性进行配置；通过 request.required.acks 属性进行配置：值可设为 0, 1, -1(all) -1 和 all 等同 0 代表：不等阅读全文

posted @ 2021-04-25 15:12 wanghongwei-dev 阅读(1123) 评论(0) 推荐(0) 编辑

Kafka基本术语介绍

摘要：Kafka 基本术语对于 Kafka 基本原理的介绍，可以通过对以下基本术语的介绍进行。 2.1.1 Topic 主题。在 Kafka 中，使用一个类别属性来划分消息的所属类，划分消息的这个类称为 topic。 topic 相当于消息的分类标签，是一个逻辑概念。 2.1.2 Partition 分阅读全文

posted @ 2021-04-25 15:02 wanghongwei-dev 阅读(138) 评论(0) 推荐(0) 编辑

Kafka2.8版本部署

摘要：部署及其简单，生产配置文件另行调优，此处不再赘述。 1.安装zookeeper cd /usr/local/ wget https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.6.3/apache-zookeeper-3.6 阅读全文

posted @ 2021-04-25 14:33 wanghongwei-dev 阅读(1615) 评论(0) 推荐(0) 编辑

RabbitMQ镜像集群组建

摘要：\1. 添加/etc/hosts对主机名的解析(所有集群节点都需要操作) \2. 停止app(所有集群节点都需要操作) [root@master ~]# rabbitmqctl stop_app [root@node01 ~]# rabbitmqctl stop_app [root@node02 ~ 阅读全文

posted @ 2021-04-22 14:44 wanghongwei-dev 阅读(157) 评论(0) 推荐(0) 编辑

RabbitMQ原理解析

摘要：什么叫消息队列消息（Message）是指在应用间传送的数据。消息可以非常简单，比如只包含文本字符串，也可以更复杂，可能包含嵌入对象。消息队列（Message Queue）是一种应用间的通信方式，消息发送后可以立即返回，由消息系统来确保消息的可靠传递。消息发布者只管把消息发布到 MQ 中而不用管谁阅读全文

posted @ 2021-04-22 14:09 wanghongwei-dev 阅读(271) 评论(0) 推荐(0) 编辑

RabbitMQ3.8版本部署

摘要：\1. 在rabbitmq 官网查看依赖关系 https://www.rabbitmq.com/which-erlang.html \2. 下载对应的安装包，下载地址如下： https://github.com/rabbitmq/rabbitmq-server/releases https://gi 阅读全文

posted @ 2021-04-22 11:32 wanghongwei-dev 阅读(288) 评论(0) 推荐(0) 编辑