Edehuag

导航

< 2025年2月 >
26 27 28 29 30 31 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 1
2 3 4 5 6 7 8

统计

02 2025 档案

RocketMQ之消息存储技术
摘要:消息存储概述 分布式队列因为有高可靠性的要求,所以数据要进行持久化存储,RocketMQ采用的是类似于Kafka的文件存储机制,即直接用磁盘文件来保存消息,而不需要借助MySQL这一类索引工具。 目前的MQ中间件从存储模型来,分为需要持久化和不需要持久化的两种模型,现在大多数的是支持持久化存储的,比 阅读全文

posted @ 2025-02-24 10:27 饿得慌~ 阅读(5) 评论(0) 推荐(0) 编辑

kafka之消费者线程安全设计
摘要:消费者线程安全问题 首先kafka的Java consumer是单线程的设计,但准确来说是双线程,kafka新版本中kafkaConsumer变成了用户主线程和心跳线程的双线程设计。 所谓用户主线程可以理解为启动Consumer应用程序的main方法的那个线程,而心跳线程(Heartbeat Thr 阅读全文

posted @ 2025-02-19 09:13 饿得慌~ 阅读(5) 评论(0) 推荐(0) 编辑

kafka之消费者消息丢失和重复消费
摘要:如果我们对于位移提交控制不好可能出现消息丢失以及消息消息重复的情况 重复消费 消费了数据没有提交offset 比如开启了自动offset提交,consumer默认5s提交一次offset,提交offset 2s之后consumer挂了,此时已经消费了2s的消息,但是因为没有触发5s时间间隔没有告诉k 阅读全文

posted @ 2025-02-19 09:04 饿得慌~ 阅读(9) 评论(0) 推荐(0) 编辑

云服务扩容后磁盘挂载问题
摘要:之前首先联系云服务商为服务器分配一块新的硬盘。由于本人实际场景并未操作过磁盘挂载,就参考了一份手册进行挂载 犯下的严肃问题在此记录一下并对命令进行详细届时。 之前因为将挂载路径定义到了‘/’根目录下,导致后续因为磁盘利用率不足需要进行回收时,因‘/’目录涉及到系统盘无法回收资源导致了重装系统。 1、 阅读全文

posted @ 2025-02-10 11:22 饿得慌~ 阅读(17) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示