RabbitMQ 学习系列1 简介
一.什么是消息中间件
消息(message)是指应用间传送的数据,消息可以非常简单,比如只包含文本字符中,json等,也可以很复杂,比如内嵌对象。
消息队列中间件(Message Queue Middleware 简称MQ)是指利用高效可靠的消息传递机制进行与平台无关的数据交流,并基于数据通信来进行分布式系统的集成。
MQ一般有两种传递模式:点对点(p2p, point-to-point)模式和发布/订阅(pub/sub)模式。点对点模式是基于队列的,消息生产者发送消息到队列,消息消费者从队列中接收消息,队列在存在使得消息的异步传输成为可能。 发布订阅模式定义 了如何向一个内容节点发布和订阅消息,这个内容节点称为主题(topic),主题可能认为是消息传递的中介,消息发布者将消息发布到某个主题,消息订阅者则从主题中订阅消息。发布和订阅模式在消息的一对多广播时采用。
目前开源的消息中间件有很多,比较主流的有rabbitmq,kafka, activemq,rocketmq等。应用mq后,应用程序彼此不直接通信,而是作为中介的消息中间件通信,消息中间件提供了有保证的消息发送,应用程序人员无须了解远程过程调用(rpc)和网络通信协议的细节。
消息中间件适用于需要可靠的数据传送的分布式环境。采用消息中间件的系统中,不同的对象之间通过传递消息来激活对方的事件,以完成相应的操作。发送者将消息发送到消息服务器--》消息服务器将消息存放在若干队列中--》在合适的时候再将消息转发给接收者。消息中间件能在不同平台之间通信,它常被用来屏蔽各种平台及协议之间的特性中,实现应用程序之间的协同,其优点在于能够在客户和服务器之间提供同步和异步的连接,并且在任何时刻都可以将消息进行传送或者存储转发。
二.消息中间件的作用
消息中间件在不同场景下可以展现不同的作用,总的来说,消息中间件的作用可能概括如下:
解耦:消息中间件在处理过程中间插入一个隐含的,基于数据的接口层,两边的处理过程都要实现这一接口,这允许你独立的扩展或修改两边的处理过程,只要确认它们遵守同样的接口约束即可。
冗余(存储):有些情况下,处理数据的过程会失败,消息中间件可以把数据进行持久化直到它们已经被完全处理,避免数据丢失风险。
扩展性:因为消息中间件解耦了应用的处理过程,所以提高消息入队和处理的效率是很容易的,只要另外增加处理过程即可,不需要改变代码,也不需要调节参数。
削峰:在访问量剧增的情况下,应用仍然需要继续发挥作用,但是这样的突发流量并不常见,使用消息中间件能够使关键组件支撑突发访问压力,不会因为突发的超负荷请求而完全崩溃。
可恢复性:当系统一部分组件失效时,不会影响到整个系统,消息中间件降低了进程间的耦合度,所以即使一个处理消息的进程挂掉,加入消息中间件的消息仍然可以在系统恢复后进行处理。
顺序保证:在大多数使用场景下,数据处理的顺序很重要,大部分消息中间件支持一定程序上的顺序性。
缓冲:消息中间件通过一个缓冲层来帮助任务最高效率地执行,写入消息中间件的处理会尽可能快速,该缓冲层有助于控制和优化数据流经过系统的速度。
异步通信:很多时间应用不想也不需要立即处理消息,消息中间件提供了异步处理机制,允许应用把一些消息放入消息中间件,但并不立即处理它,在之后需要的时候再慢慢处理。
三.RabbitMQ的起源
Rabbitmq采用erlang语言实现AMQP(Advanced message queuing protocol 高级消息队列协议)的消息中间件,最初源于金融系统,用于在分布式系统中存储转发消息。在此之前,有一些消息中间件的商业实现,比如微软的msmq,IBM的websphere等,由于高昂的价格,一般只应用于大型组织机构。由于商业壁垒,商业mq不能解决应用互通的问题。