随笔分类 -  分布式

摘要:怎么正确使用锁?这篇文章主要关注分布式锁,包括加锁和解锁的过程,锁的用法,加锁带来的代价,对性能的影响以及如何避免死锁。 阅读全文
posted @ 2023-03-18 11:08 李潘 阅读(338) 评论(0) 推荐(0) 编辑
摘要:怎么做才能不丢消息?这篇文章主要描述如何在使用消息队列时避免丢消息,包括检测消息丢失的方法以及消息从生产到完成消费的过程中,经历的生产、存储和消费这三个阶段是分别如何保证消息可靠传递的。 阅读全文
posted @ 2023-03-09 07:01 李潘 阅读(93) 评论(0) 推荐(0) 编辑
摘要:怎么用消息队列实现分布式事务?这篇文章描述如何使用消息队列中的事务消息机制实现分布式事务。事务消息适用于需要异步更新数据,并且对数据实时性要求不太高的场景。 阅读全文
posted @ 2023-03-08 06:48 李潘 阅读(331) 评论(0) 推荐(0) 编辑
摘要:聊聊消息队列中的基础概念这篇文章主要描述消息队列中的一些基本概念,我们在使用不同的消息队列产品时,会遇到不同的“名词”,今天我们今天来聊聊消息队列发展历史,以及一些相关基本概念。 阅读全文
posted @ 2023-03-07 07:25 李潘 阅读(128) 评论(0) 推荐(0) 编辑
摘要:我们要选择哪个消息队列产品?这篇文章主要描述如何进行消息队列产品选型,包括产品选型需要考虑的因素、三种比较流行的消息队列产品的优缺点以及如何根据我们的使用场景选择合适的消息队列产品。 阅读全文
posted @ 2023-03-06 07:18 李潘 阅读(179) 评论(0) 推荐(0) 编辑
摘要:我们为什么要用消息队列?这篇文章主要描述我们消息队列的使用场景,主要包括三种场景:异步处理、流量控制和服务解耦。引入消息队列后,也会带来通信延迟、系统复杂度以及可能的数据不一致问题。 阅读全文
posted @ 2023-03-05 09:12 李潘 阅读(164) 评论(0) 推荐(0) 编辑
摘要:分布式系统中的网络分区问题这篇文章主要讨论分布式系统中的网络分区问题,网络分区是指在分布式集群中,节点之间由于网络不通,导致集群中的节点形成不同的子集,子集中的节点可以相互通信,子集之间的网络是不通的。 阅读全文
posted @ 2023-03-04 12:52 李潘 阅读(224) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day28这篇文章主要讨论分布式系统中的故障恢复和常用的故障检测方法,包括固定心跳检测和根据历史心跳信息预测故障检测方法。 阅读全文
posted @ 2023-03-03 06:56 李潘 阅读(82) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day27这篇文章主要描述故障隔离,设计良好的故障隔离策略,可以提高系统的可用性,避免出现大规模故障,甚至瘫痪。常用的故障隔离策略包括线程级隔离、进程级隔离和资源隔离。 阅读全文
posted @ 2023-03-02 07:31 李潘 阅读(65) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day26这篇文章主要描述分布式系统中的流量控制,当有突发大流量进入时,如何控制流量对于保证系统高可靠非常重要。常见的流量控制策略包括漏桶策略和令牌桶策略。 阅读全文
posted @ 2023-03-01 07:24 李潘 阅读(49) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day25这篇文章主要讨论负载均衡及其常用策略。负载均衡是分布式系统中非常重要的技术,它包括请求负载均衡和数据负载均衡,通过负载均衡,可以有效提高系统的并发处理能力。 阅读全文
posted @ 2023-02-28 12:30 李潘 阅读(40) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day24这篇文章主要描述分布式数据缓存技术,它将常用数据存储到离用户近、离应用近的位置,以减少远程数据传输的延迟,提升系统性能。 阅读全文
posted @ 2023-02-27 09:22 李潘 阅读(41) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day23这篇文章主要关注分布式系统中的数据复制,它提高了系统的可用性和可靠性,保证业务正常运行。常见的数据复制方法包括同步复制技术、异步复制技术和半同步复制技术。 阅读全文
posted @ 2023-02-26 12:22 李潘 阅读(41) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day22这篇文章主要描述分布式数据存储系统中的数据分片方法,包括哈希方法、一致性哈希方法、带有限负载的一致性哈希方法以及带虚拟节点的一致性哈希方法。 阅读全文
posted @ 2023-02-25 11:15 李潘 阅读(60) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day21分布式存储系统将用户存储的数据根据某种规则存储到不同机器上,当用户想要获取指定数据时,再按照规则到存储数据的机器中获取。数据生产者/消费者、数据索引和数据存储是分布式存储系统的三大要素。 阅读全文
posted @ 2023-02-24 15:37 李潘 阅读(71) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day20这篇文章主要描述分布式系统中经常讨论的CAP理论,它从一致性、可用性和分区容错性是分布式系统的三个特征,我们只能满足其中两个特征,对于分布式系统来说,根据不同的应用场景,可以是AP,也可以是CP。 阅读全文
posted @ 2023-02-23 14:32 李潘 阅读(53) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day19这篇文章主要描述分布式通信中常用的消息队列模式,引入消息队列,通过异步通信的方式,可以提升系统响应速度,实现系统组件之间解耦,文章还描述了RocketMQ的架构和组件。 阅读全文
posted @ 2023-02-22 15:35 李潘 阅读(40) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day18这篇文章主要描述分布式通信中的发布订阅模式,这是一种异步通信模式,它可以解耦消息的生产者和消费者,提高系统的稳定性。同时,文章也描述了Kafka的架构以及主题、分区和消费组。 阅读全文
posted @ 2023-02-21 12:27 李潘 阅读(45) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day17这篇文章主要描述分布式系统中非常重要的通信方式:远程过程调用,它可以让服务调用方像调用本地方法那样,去调用远程服务提供方所提供的服务,在这个过程中,服务调用方对于底层通信是无感知的。 阅读全文
posted @ 2023-02-20 08:30 李潘 阅读(101) 评论(0) 推荐(0) 编辑
摘要:《分布式技术原理与算法解析》学习笔记Day16这篇文章主要描述分布式系统中的流水线计算模式,它来自于工业领域的流水线作业模式,将一个任务分为多个步骤执行,可以提高系统效率。文章描述了ETL流水线以及机器学习中常用的模型训练流水线。 阅读全文
posted @ 2023-02-19 13:08 李潘 阅读(58) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示