Kafka Study

Kafka简介

消息队列

• 消息队列--用于存放消息的组件
• 程序员可以将消息放入队列中，也可以从消息队列中获取消息
• 很多时候消息队列不是一个永久性的存储，是作为临时存储存在的（设定一个期限：设置消息在MQ中保存10天）
• 消息队列中间件：组件：Kafka、Active MQ、RabbitMQ、RocketMQ、ZeroMQ

应用场景

• 异步处理

  • 可以将一些比较耗时的操作放到其他系统中，通过消息队列将需要进行处理的消息进行存储，其他系统可以消费消息队列中的数据。
  • 比较常见：注册成功后，将用户数据存到数据库中，同时发送短信和邮箱等操作。

• 流量消峰

  • 低延迟、高可靠、高吞吐的，可以应对大量并发。
  • 可以引入缓存区来暂存消息。批量处理。限流。消费者伸缩。负载均衡。

• 系统解耦

  • 原先一个微服务是通过接口（HTTP）调用另一个微服务，耦合相对严重，只要接口发生变化很有可能就会导致系统不可用。
  • 使用消息队列可以将系统进行解耦合，将第一个微服务的消息放到队列中，另一个微服务可以从消息队列中把消息取出来进行处理，进行系统解耦。

• 日志处理

  • 可以将消息队列作为临时存储，或者一种通信管道。

两种模型

• 生产者、消费者模型
  • 生产者负责将消息生产到MQ中
  • 消费者负责从MQ中获取消息
  • 生产者和消费者之间是解耦的，可能是生产者一个程序、消费者是另外的一个程序。
• 消息队列的模式
  • 点对对：一个消费者消费一个消息
  • 发布订阅：多个消费者可以消费一个消息

//再看

https://www.bilibili.com/video/BV19y4y1b7Uo/?p=4&spm_id_from=pageDriver&vd_source=56102d8741b60f8a5fd28fed8a3d6e46