摘要: 一、背景 MQ组件是系统架构里必不可少的一门利器,设计层面可以降低系统耦合度,高并发场景又可以起到削峰填谷的作用,从单体应用到集群部署方案,再到现在的微服务架构,MQ凭借其优秀的性能和高可靠性,得到了广泛的认可。随着数据量增多,系统压力变大,开始出现这种现象:数据库已经更新了,但消息没发出来,或者消 阅读全文
posted @ 2020-04-26 14:15 大数据从业者FelixZh 阅读(742) 评论(0) 推荐(0) 编辑
摘要: 特性背景 消息事务是指一系列的生产、消费操作可以要么都完成,要么都失败,类似数据库的事务。这个特性在0.10.2的版本是不支持的,从0.11版本开始才支持。 支持事务消息有什么作用?消息事务是实现分布式事务的一种方案,可以确保分布式场景下的数据最终一致性。 例如最常用的转账场景,小王 转账到小明,实 阅读全文
posted @ 2020-04-26 13:51 大数据从业者FelixZh 阅读(663) 评论(0) 推荐(0) 编辑
摘要: 1. Kafka事务的使用 Kafka中的事务特性主要用于以下两种场景: 生产者发送多条消息可以封装在一个事务中,形成一个原子操作。多条消息要么都发送成功,要么都发送失败。 read-process-write模式:将消息消费和生产封装在一个事务中,形成一个原子操作。在一个流式处理的应用中,常常一个 阅读全文
posted @ 2020-04-26 10:44 大数据从业者FelixZh 阅读(2542) 评论(0) 推荐(0) 编辑