12 2019 档案

初识 Kafka Producer 生产者
摘要：温馨提示：整个 Kafka Client 专栏基于 kafka 2.3.0 版本。 @ "TOC" 1、KafkaProducer 概述 根据 KafkaProducer 类上的注释上来看 KafkaProducer 具有如下特征： KafkaProducer 是线程安全的，可以被多个线程交叉使用。 阅读全文
posted @ 2019-12-31 21:04 中间件兴趣圈 阅读(1515) 评论(0) 推荐(0)
一次 RocketMQ 进程自动退出排查经验分享（实战篇）
摘要：1、背景 公司一个 RocketMQ 集群由4主4从组成，突然其中3台服务器“竟然”在同一时间下线，其监控显示如下： 依次查看三台机器的监控图形，时间戳几乎完美“吻合”，不可思议吧。 2、故障分析 出现问题，先二话不说，马上重启各服务器，尽快恢复集群，降低对业务的影响，接下来开始对日志进行分析。 J 阅读全文
posted @ 2019-12-29 15:51 中间件兴趣圈 阅读(1490) 评论(1) 推荐(1)
再谈 RocketMQ broker busy(实战篇)
摘要：本文将在 "RocketMQ 消息发送system busy、broker busy原因分析与解决方案" 的基础上，结合生产上的日志尝试再次理解 broker busy 以及探讨解决方案。 首先，broker busy 相关的日志关键字如下： [REJECTREQUEST]system busy t 阅读全文
posted @ 2019-12-26 22:05 中间件兴趣圈 阅读(1919) 评论(0) 推荐(0)
RocketMQ 升级到主从切换(DLedger、多副本)实战
摘要：本文主要介绍如何将 RocketMQ 集群从原先的主从同步升级到主从切换。 首先先介绍与 DLedger 多副本即 RocketMQ 主从切换相关的核心配置属性，然后尝试搭建一个主从同步集群，再从原先的 RocketMQ 集群平滑升级到 DLedger 集群的示例，并简单测试一下主从切换功能。 @ 阅读全文
posted @ 2019-12-22 17:26 中间件兴趣圈 阅读(4637) 评论(0) 推荐(1)
RocketMQ 整合 DLedger(多副本)即主从切换实现平滑升级的设计技巧
摘要：源码分析 RocketMQ DLedger 多副本系列已经进行到第 8 篇了，前面的章节主要是介绍了基于 raft 协议的选主与日志复制，从本篇开始将开始关注如何将 DLedger 应用到 RocketMQ中。 摘要：详细分析了RocketMQ DLedger 多副本(主从切换) 是如何整合到 Ro 阅读全文
posted @ 2019-12-19 23:10 中间件兴趣圈 阅读(1800) 评论(0) 推荐(1)
基于 raft 协议的 RocketMQ DLedger 多副本日志复制设计原理
摘要：上一篇 "源码分析 RocketMQ DLedger(多副本) 之日志复制(传播)" ，可能有不少读者朋友们觉得源码阅读较为枯燥，看的有点云里雾里，本篇将首先梳理一下 RocketMQ DLedger 多副本关于日志复制的三个核心流程图，然后再思考一下在异常情况下如何保证数据一致性。 @ "TOC" 阅读全文
posted @ 2019-12-17 21:19 中间件兴趣圈 阅读(1432) 评论(0) 推荐(2)
源码分析 RocketMQ DLedger(多副本) 之日志复制(传播)
摘要：温馨提示：源码分析RocketMQ DLedger 多副本系列连载中： 1、 "RocketMQ 多副本前置篇：初探raft协议" 2、 "源码分析 RocketMQ DLedger 多副本之 Leader 选主" 3、 "源码分析 RocketMQ DLedger 多副本存储实现" 4、 "源码分 阅读全文
posted @ 2019-12-15 20:24 中间件兴趣圈 阅读(675) 评论(0) 推荐(1)
RocketMQ 主题扩分片后遇到的坑
摘要：消息组接到某项目组反馈，topic 在扩容后出现部分队列无法被消费者，导致消息积压，影响线上业务？ 考虑到该问题是发送在真实的线上环境，为了避免泄密，本文先在笔者的虚拟机中来重现问题。 @ "TOC" 1、案情回顾 1.1 集群现状 集群信息如下： 例如业务主体名 topic_dw_test_by_ 阅读全文
posted @ 2019-12-12 22:11 中间件兴趣圈 阅读(3225) 评论(0) 推荐(3)
源码分析 RocketMQ DLedger 多副本存储实现
摘要：@ "TOC" RocketMQ DLedger 的存储实现思路与 RocketMQ 的存储实现思路相似，本文就不再从源码角度详细剖析其实现，只是点出其实现关键点。我们不妨简单回顾一下 CommitLog 文件、ConsumeQueue 文件设计思想。 其文件组成形式如下： 正如上图所示，多个 co 阅读全文
posted @ 2019-12-10 20:22 中间件兴趣圈 阅读(478) 评论(0) 推荐(0)
源码分析 RocketMQ DLedger 多副本之 Leader 选主
摘要：温馨提示：《RocketMQ技术内幕》作者倾力打造的全新专栏：RocketMQ 多副本(主从切换)： 1、 "《RocketMQ 多副本前置篇：初探raft协议》" 本文将按照 "《RocketMQ 多副本前置篇：初探raft协议》" 的思路来学习RocketMQ选主逻辑。首先先回顾一下关于Lead 阅读全文
posted @ 2019-12-08 21:54 中间件兴趣圈 阅读(1097) 评论(0) 推荐(0)
RocketMQ 多副本前置篇：初探raft协议
摘要：Raft协议是分布式领域解决一致性的又一著名协议，主要包含Leader选举、日志复制两个部分。 温馨提示： 本文根据raft官方给出的raft动画进行学习，其动画展示地址：http://thesecretlivesofdata.com/raft/ @ "TOC" 1、Leader选举 1.1 一轮投 阅读全文
posted @ 2019-12-05 21:32 中间件兴趣圈 阅读(862) 评论(0) 推荐(1)