RabbitMQ 高级特性
过期时间TTL
过期时间TTL表示可以对消息设置预期的时间,在这个时间内都可以被消费者接收获取;过了之后消息将自动被删除。RabbitMQ可以对消息和队列设置TTL。目前有两种方法可以设置。
- 第一种方法是通过队列属性设置,队列中所有消息都有相同的过期时间。
- 第二种方法是对消息进行单独设置,每条消息TTL可以不同。
如果上述两种方法同时使用,则消息的过期时间以两者之间TTL较小的那个数值为准。消息在队列的生存时间一旦超过设置的TTL值,就称为dead message被投递到死信队列, 消费者将无法再收到该消息。
设置队列TTL
在 spring-rabbitmq-producer\src\main\resources\spring\spring-rabbitmq.xml
文件中添加如下内容:
<!--定义过期队列及其属性,不存在则自动创建--> <rabbit:queue id="my_ttl_queue" name="my_ttl_queue" auto-declare="true"> <rabbit:queue-arguments> <!--投递到该队列的消息如果没有消费都将在6秒之后被删除--> <entry key="x-message-ttl" value-type="long" value="6000"/> </rabbit:queue-arguments> </rabbit:queue>
然后在测试类 spring-rabbitmq-producer\src\test\java\com\itheima\rabbitmq\ProducerTest.java
中编写如下方法发送消息到上述定义的队列:
/** * 过期队列消息 * 投递到该队列的消息如果没有消费都将在6秒之后被删除 */ @Test public void ttlQueueTest(){ //路由键与队列同名 rabbitTemplate.convertAndSend("my_ttl_queue", "发送到过期队列my_ttl_queue,6秒内不消费则不能再被消费。"); }
参数 x-message-ttl 的值 必须是非负 32 位整数 (0 <= n <= 2^32-1) ,以毫秒为单位表示 TTL 的值。这样,值 6000 表示存在于 队列 中的当前 消息 将最多只存活 6 秒钟。
如果不设置TTL,则表示此消息不会过期。如果将TTL设置为0,则表示除非此时可以直接将消息投递到消费者,否则该消息会被立即丢弃。
设置消息TTL
消息的过期时间;只需要在发送消息(可以发送到任何队列,不管该队列是否属于某个交换机)的时候设置过期时间即可。在测试类中编写如下方法发送消息并设置过期时间到队列:
/** * 过期消息 * 该消息投递任何交换机或队列中的时候;如果到了过期时间则将从该队列中删除 */ @Test public void ttlMessageTest(){ MessageProperties messageProperties = new MessageProperties(); //设置消息的过期时间,5秒 messageProperties.setExpiration("5000"); Message message = new Message("测试过期消息,5秒钟过期".getBytes(), messageProperties); //路由键与队列同名 rabbitTemplate.convertAndSend("my_ttl_queue", message); }
expiration 字段以微秒为单位表示 TTL 值。且与 x-message-ttl 具有相同的约束条件。因为 expiration 字段必须为字符串类型,broker 将只会接受以字符串形式表达的数字。
当同时指定了 queue 和 message 的 TTL 值,则两者中较小的那个才会起作用。
死信队列
DLX,全称为Dead-Letter-Exchange , 可以称之为死信交换机,也有人称之为死信邮箱。当消息在一个队列中变成死信(dead message)之后,它能被重新发送到另一个交换机中,这个交换机就是DLX ,绑定DLX的队列就称之为死信队列。
消息变成死信,可能是由于以下的原因:
- 消息被拒绝
- 消息过期
- 队列达到最大长度
DLX也是一个正常的交换机,和一般的交换机没有区别,它能在任何的队列上被指定,实际上就是设置某一个队列的属性。当这个队列中存在死信时,Rabbitmq就会自动地将这个消息重新发布到设置的DLX上去,进而被路由到另一个队列,即死信队列。
要想使用死信队列,只需要在定义队列的时候设置队列参数 x-dead-letter-exchange
指定交换机即可。
具体步骤如下面的章节。
定义死信交换机
在 spring-rabbitmq-producer\src\main\resources\spring\spring-rabbitmq.xml
文件中添加如下内容:
<!--定义定向交换机中的持久化死信队列,不存在则自动创建-->
<rabbit:queue id="my_dlx_queue" name="my_dlx_queue" auto-declare="true"/>
<!--定义广播类型交换机;并绑定上述两个队列-->
<rabbit:direct-exchange id="my_dlx_exchange" name="my_dlx_exchange" auto-declare="true">
<rabbit:bindings>
<!--绑定路由键my_ttl_dlx、my_max_dlx,可以将过期的消息转移到my_dlx_queue队列-->
<rabbit:binding key="my_ttl_dlx" queue="my_dlx_queue"/>
<rabbit:binding key="my_max_dlx" queue="my_dlx_queue"/>
</rabbit:bindings>
</rabbit:direct-exchange>
队列设置死信交换机
为了测试消息在过期、队列达到最大长度后都将被投递死信交换机上;所以添加配置如下:
在 spring-rabbitmq-producer\src\main\resources\spring\spring-rabbitmq.xml
文件中添加如下内容:
<!--定义过期队列及其属性,不存在则自动创建--> <rabbit:queue id="my_ttl_dlx_queue" name="my_ttl_dlx_queue" auto-declare="true"> <rabbit:queue-arguments> <!--投递到该队列的消息如果没有消费都将在6秒之后被投递到死信交换机--> <entry key="x-message-ttl" value-type="long" value="6000"/> <!--设置当消息过期后投递到对应的死信交换机--> <entry key="x-dead-letter-exchange" value="my_dlx_exchange"/> </rabbit:queue-arguments> </rabbit:queue> <!--定义限制长度的队列及其属性,不存在则自动创建--> <rabbit:queue id="my_max_dlx_queue" name="my_max_dlx_queue" auto-declare="true"> <rabbit:queue-arguments> <!--投递到该队列的消息最多2个消息,如果超过则最早的消息被删除投递到死信交换机--> <entry key="x-max-length" value-type="long" value="2"/> <!--设置当消息过期后投递到对应的死信交换机--> <entry key="x-dead-letter-exchange" value="my_dlx_exchange"/> </rabbit:queue-arguments> </rabbit:queue> <!--定义定向交换机 根据不同的路由key投递消息--> <rabbit:direct-exchange id="my_normal_exchange" name="my_normal_exchange" auto-declare="true"> <rabbit:bindings> <rabbit:binding key="my_ttl_dlx" queue="my_ttl_dlx_queue"/> <rabbit:binding key="my_max_dlx" queue="my_max_dlx_queue"/> </rabbit:bindings> </rabbit:direct-exchange>
消息过期的死信队列测试
1)发送消息代码
添加 spring-rabbitmq-producer\src\test\java\com\itheima\rabbitmq\ProducerTest.java
方法
/** * 过期消息投递到死信队列 * 投递到一个正常的队列,但是该队列有设置过期时间,到过期时间之后消息会被投递到死信交换机(队列) */ @Test public void dlxTTLMessageTest(){ rabbitTemplate.convertAndSend("my_normal_exchange", "my_ttl_dlx", "测试过期消息;6秒过期后会被投递到死信交换机"); }
2)在rabbitMQ管理界面中结果
未过期:
过期后:
3)流程
具体因为队列消息过期而被投递到死信队列的流程:
消息过长的死信队列测试
1)发送消息代码
添加 spring-rabbitmq-producer\src\test\java\com\itheima\rabbitmq\ProducerTest.java
方法
/** * 超过队列长度消息投递到死信队列 * 投递到一个正常的队列,但是该队列有设置最大消息数,到最大消息数之后队列中最早的消息会被投递到死信交换机(队列) */ @Test public void dlxMaxMessageTest(){ rabbitTemplate.convertAndSend("my_normal_exchange", "my_max_dlx", "队列my_max_dlx_queue的最大长度为2;消息超过后会被投递到死信交换机;这是第1个消息"); rabbitTemplate.convertAndSend("my_normal_exchange", "my_max_dlx", "队列my_max_dlx_queue的最大长度为2;消息超过后会被投递到死信交换机;这是第2个消息"); rabbitTemplate.convertAndSend("my_normal_exchange", "my_max_dlx", "队列my_max_dlx_queue的最大长度为2;消息超过后会被投递到死信交换机;这是第3个消息"); }
2)在rabbitMQ管理界面中结果
上面发送的3条消息中的第1条消息会被投递到死信队列中(如果启动了消费者,那么队列消息很快会被取走消费掉);
3)消费者接收死信队列消息
与过期消息投递到死信队列的代码和配置是共用的,并不需要重新编写。
4)流程
消息超过队列最大消息长度而被投递到死信队列的流程在前面的图中已包含。
延迟队列
延迟队列存储的对象是对应的延迟消息;所谓“延迟消息” 是指当消息被发送以后,并不想让消费者立刻拿到消息,而是等待特定时间后,消费者才能拿到这个消息进行消费。
在RabbitMQ中延迟队列可以通过 过期时间
+ 死信队列
来实现;具体如下流程图所示:
在上图中;分别设置了两个5秒、10秒的过期队列,然后等到时间到了则会自动将这些消息转移投递到对应的死信队列中,然后消费者再从这些死信队列接收消息就可以实现消息的延迟接收。
延迟队列的应用场景;如:
- 在电商项目中的支付场景;如果在用户下单之后的几十分钟内没有支付成功;那么这个支付的订单算是支付失败,要进行支付失败的异常处理(将库存加回去),这时候可以通过使用延迟队列来处理
- 在系统中如有需要在指定的某个时间之后执行的任务都可以通过延迟队列处理