RabbitMq初探——消息确认
消息确认机制
前言
消息队列的下游,业务逻辑可能复杂,处理任务可能花费很长时间。若在一条消息到达它的下游,任务刚处理了一半,由于不确定因素,下游的任务处理进程
被kill掉啦,导致任务无法执行完成。而沿用我们前面几章的消息删除【消息一旦抛给下游,就立马从队列删除】,这可能会引发问题——消息没有处理完,但是队列
里的消息已经被删除了。
因此,rabbitmq内含 消息确认机制【Message acknowledgment】,简称ack。rabbitmq将消息发送给consumer,此刻消息不会从队列删除,consumer消费完毕消息后,
给rabbitmq发送一条ack,在rabbitmq收到ack后,才从队列里删除。
代码
在consumer层的代码,需要修改两步。
一、添加ack代码
$msg->delivery_info['channel']->basic_ack($msg->delivery_info['delivery_tag']);
二、开启消息确认机制
$channel->basic_consume('task_queue', '', false, false, false, false, $callback); //basic_consume第四个参数置成false,no_ack=false
整体代码见下
生产者sender.php
<?php /** * sender.php * Created by PhpStorm. * User: wangdaxi * Date: 2017/10/18 * Time: 14:26 */ require_once __DIR__ . '/vendor/autoload.php'; use PhpAmqpLib\Connection\AMQPStreamConnection; use PhpAmqpLib\Message\AMQPMessage; $connection = new AMQPStreamConnection('127.0.0.1', 5672, 'guest', 'guest'); $channel = $connection->channel(); $channel->queue_declare('hello', false, false, false, false); $data = implode(" ", array_slice($argv, 1)); empty($data) && $data = "Hello World!"; $msg = new AMQPMessage($data); $channel->basic_publish($msg, '', 'hello'); echo " [x] Sent '$data'\n"; //close the channel and connection; $channel->close(); $connection->close();
消费者receive.php
<?php /** * receive.php * Created by PhpStorm. * User: wangdaxi * Date: 2017/10/18 * Time: 14:34 */ require_once __DIR__ . '/vendor/autoload.php'; use PhpAmqpLib\Connection\AMQPStreamConnection; $connection = new AMQPStreamConnection('127.0.0.1', 5672, 'guest', 'guest'); $channel = $connection->channel(); $channel->queue_declare('hello', false, false, false, false); echo ' [*] Waiting for messages. To exit press CTRL+C', "\n"; $callback = function($msg) { echo "[x] Received ", $msg->body, "\n"; sleep(substr_count($msg->body, '.')); echo "[x] Done\n"; //消息确认 $msg->delivery_info['channel']->basic_ack($msg->delivery_info['delivery_tag']); }; $channel->basic_consume('hello', '', false, false, false, false, $callback); while(count($channel->callbacks)) { $channel->wait(); }
验证
模拟消息下游进程被kill掉。
1. 开启两个终端分别作为消费者,记作C1,C2。分别等待接收消息。
2. 开启一个终端作为生产者。记作P。发送消息,用圆点来模拟耗时任务。
3. 发现C1接收到了消息,这里我们用 Ctrl+C关闭掉该进程。
4. 由于C1没有回传ack,且已中断,C2接收到了该消息,处理并且ack回传。
5. 通过 rabbitmq命令 查看hello队列messages_ready 和 messages_unacknowledged,ready状态的消息和未确认消息都是0。证明该消息已经被消费。
疑问
如果消费者执行完毕消息但是忘记了ack,会发生什么?
1. 修改消费者代码,注释掉ack代码。
2. 开启两个终端,分别作为消费者C1、生产者P。
3. 生产者P生产消息
4. 消费者接收到消息并处理
5. 命令查看消息数,发现未ack消息有两条。
6. 修改代码,解除ack通知的注释,另开终端作为消费者C2。发现C2不会接收到任何消息。
7. 关闭C1,C2接收C1未ack消息并处理。
8. 命令行查看发现消息都被消费掉。
结论
当消费者开启ack确认机制却忘记在处理完消息后回传rabbitmq ack时,会产生严重后果。
1. 未ack的消费者可以继续接收消息,但是不回传ack。导致rabbitmq内存被unacknowledged messages占用过多。
2. 从代码层面要解决掉,需要放弃掉这个进程,另开进程添加ack代码,进行消息回传。从而清除掉占用内存的已经被处理却未被删除的消息。
以上。