消息队列与订单延迟处理
消息队列
rabbimq介绍与安装
扩展安装
rabbimq在laravel中使用
消息队列同步Redis商品
- rabbitmq介绍与安装
1.1 软件介绍
消息（Message）是指在应用间传送的数据。消息可以非常简单，比如只包含文本字符串，也可以更复杂，可能包含嵌入对象。
消息队列（Message Queue）是一种应用间的通信方式，消息发送后可以立即返回，由消息系统来确保消息的可靠传递。消息发布者只管把消息发布到 MQ 中而不用管谁来取，消息使用者只管从 MQ 中取消息而不管是谁发布的。这样发布者和使用者都不用知道对方的存在。
RabbitMQ是一个由erlang语言编写的、开源的、在AMQP基础上完整的、可复用的企业消息系统。支持多种语言，包括java、Python、ruby、PHP、C/C++等。
RabbitMQ的核心概念:
生产者（Producer）：发送消息的应用。
消费者（Consumer）：接收消息的应用。
队列（Queue）：存储消息的缓存。
消息（Message）：由生产者通过RabbitMQ发送给消费者的信息。
连接（Connection）：连接RabbitMQ和应用服务器的TCP连接。
通道（Channel）：连接里的一个虚拟通道。当你通过消息队列发送或者接收消息时，这个操作都是通过通道进行的。
交换机（Exchange）：交换机负责从生产者那里接收消息，并根据交换类型分发到对应的消息列队里。要实现消息的接收，一个队列必须到绑定一个交换机。
绑定（Binding）：绑定是队列和交换机的一个关联连接。
路由键（Routing Key）：路由键是供交换机查看并根据键来决定如何分发消息到列队的一个键。路由键可以说是消息的目的地址。
RabbitMQ的工作模式:
简单队列
工作队列
发布订阅模式
路由模式
主题模式
1.2 rabbitmq安装
1.Docker拉取rabbitmq镜像
docker pull rabbitmq
构建rabbitmq容器
docker run -p 5672:5672 -p 15672:15672 -d --name rabbitmq -v /docker/rabbitmq:/var/lib/rabbitmq --privileged=true --hostname myRabbitmq -e RABBITMQ_DEFAULT_VHOST=my_vhost -e RABBITMQ_DEFAULT_USER=admin -e RABBITMQ_DEFAULT_PASS=admin rabbitmq
进入rabbitmq容器安装可视化界面:rabbitmq_management
rabbitmq-plugins enable rabbitmq_management
查看防火墙是否关闭，服务器查看安全组端口是否开放
访问 youhost:15672 可以看到rabbitmq可视化工具的登陆界面，使用上面设置的账号密码登陆即可。
2. 扩展安装
rabbitmq-c依赖和amqp扩展安装
rabbitmq-c依赖安装
tar zxf rabbitmq-c-0.8.0.tar.gz
cd rabbitmq-c-0.8.0
./configure --prefix=/usr/local/rabbitmq-c
make install
先进入php容器安装amqp扩展 这里使用源码编译安装amqp扩展 -> 准备扩展包 ->进入安装目录
下载地址https://pecl.php.net/package/amqp
cd /home/amqp-1.10.2
find / -name phpize
#生成phpize 安装文件
/usr/local/bin/phpize
#检查php-config 文件路径是否和--with-php-config=/usr/local/bin/php-config 一致
find / -name php-config
./configure --with-php-config=/usr/local/bin/php-config --with-amqp --with-librabbitmq-dir=/usr/local/rabbitmq-c
make install
可能遇到的问题:amqp_ssl_socket.h 找不到 去librabbitmq安装包目录下进行copy cp /home/rabbitmq-c-0.8.0/librabbitmq/amqp_ssl_socket.h /home/amqp-1.10.2/
php.ini中添加
extension=amqp.so
- rabbimq在laravel中使用
安装组件
composer require vladimir-yuldashev/laravel-queue-rabbitmq "10.X" --ignore-platform-reqs
添加laravel对于rabbitmq的配置
queue.php 中rabbitmq的配置
'rabbitmq' => [
'driver' => 'rabbitmq',
'queue' => env('RABBITMQ_QUEUE', 'default'),
'connection' => PhpAmqpLib\Connection\AMQPLazyConnection::class,
'hosts' => [
[
'host' => env('RABBITMQ_HOST', '127.0.0.1'),
'port' => env('RABBITMQ_PORT', 5672),
'user' => env('RABBITMQ_USER', 'guest'),
'password' => env('RABBITMQ_PASSWORD', 'guest'),
'vhost' => env('RABBITMQ_VHOST', '/'),
],
],
'options' => [
'ssl_options' => [
'cafile' => env('RABBITMQ_SSL_CAFILE', null),
'local_cert' => env('RABBITMQ_SSL_LOCALCERT', null),
'local_key' => env('RABBITMQ_SSL_LOCALKEY', null),
'verify_peer' => env('RABBITMQ_SSL_VERIFY_PEER', true),
'passphrase' => env('RABBITMQ_SSL_PASSPHRASE', null),
],
'queue' => [
'job' => \VladimirYuldashev\LaravelQueueRabbitMQ\Queue\Jobs\RabbitMQJob::class,
]
],
/*
* Set to "horizon" if you wish to use Laravel Horizon.
*/
'worker' => env('RABBITMQ_WORKER', 'default'),
]
.env文件中
默认使用rabbitmq队列
QUEUE_CONNECTION=rabbitmq
使用的队列驱动
QUEUE_DRIVER=rabbitmq
mq的ip地址
RABBITMQ_HOST=172.17.0.10 # mq的端口
RABBITMQ_PORT=5672 # mq的账号
RABBITMQ_USER=admin # mq的密码
RABBITMQ_PASSWORD=admin
默认的虚拟主机
RABBITMQ_VHOST=my_vhost
默认队列名称
RABBITMQ_QUEUE=lmrs
- 消息队列同步Redis商品
通过rabbitmq消息队列完成消费，消费完成之后修改redis中的数据
ProductController.php 中的代码
<?php
//...省略部分代码
class ProductController extends Controller
{
//...省略部分代码
public function update(Request $request)
{
//获取商品信息
$product = Product::find($request->input("id"));
$product->update([
"name" => $request->input("name"),
"long_name" => $request->input("long_name")
]);
// return Product::find($request->input("id"));
if ($product){
//实例化job
$this->dispatch(new UpdateProduct(Product::find($request->input("id"))));
return "success";
}
return "Failed";
}
}
?>
UpdateProduct.php中代码
<?php
namespace App\Jobs;
use App\Services\RateLimitService;
use Illuminate\Bus\Queueable;
use Illuminate\Contracts\Queue\ShouldQueue;
use Illuminate\Foundation\Bus\Dispatchable;
use Illuminate\Queue\InteractsWithQueue;
use Illuminate\Queue\SerializesModels;
use App\Services\RabbitmqService;
class UpdateProduct implements ShouldQueue
{
use Dispatchable, InteractsWithQueue, Queueable, SerializesModels;
protected $productKey;
/**
* Create a new job instance.
*
* @return void
*/
public function __construct($data)
{
$this->productKey = "Lmrs::product::info::".$data->id;
//写入队列
RabbitmqService::push('update_queue',$data);
}
/**
* Execute the job.
*
* @return void
*/
public function handle()
{
//取出消费
RabbitmqService::pop('update_queue',function ($message){
//更新redis
$product = app('redis')->set($this->productKey,serialize($message));
if (!$product){
return;
}
print_r($message);
return true;
});
}
//异常处理
public function failed(\Exception $exception)
{
print_r($exception->getMessage());
}
}
?>
准备好Rabbitmq服务类 RabbitmqService.php中代码如下
<?php
namespace App\Services;
use PhpAmqpLib\Connection\AMQPStreamConnection;
use PhpAmqpLib\Message\AMQPMessage;
class RabbitmqService
{
public static function getConnect()
{
//RABBITMQ 配置项
$config = [
'host' => env('RABBITMQ_HOST', '127.0.0.1'),
'port' => env('RABBITMQ_PORT', 5672),
'user' => env('RABBITMQ_USER', 'guest'),
'password' => env('RABBITMQ_PASSWORD', 'guest'),
'vhost' => env('RABBITMQ_VHOST', '/'),
];
return new AMQPStreamConnection($config["host"],$config["port"],$config["user"],$config["password"],$config["vhost"]);
}
//生产者
public static function push($queue,$messageBody,$exchange='router')
{
//获取连接
$connection = self::getConnect();
//构建通道
$channel = $connection->channel();
//声明一个队列
$channel->queue_declare($queue,false,true,false,false);
//指定交换机 以路由模式
$channel->exchange_declare($exchange,'direct',false,true,false);
//绑定队列和类型
$channel->queue_bind($queue,$exchange);
$message = new AMQPMessage($messageBody,array('content_type' => 'text/plain', 'delivery_mode' => AMQPMessage::DELIVERY_MODE_PERSISTENT));
//消息推送
$channel->basic_publish($message,$exchange);
$channel->close();
$connection->close();
}
//消费者：取出消息进行消费，并返回
public static function pop($queue,$callback,$exchange='router')
{
$connection = self::getConnect();
$channel = $connection->channel();
//从队列中取出消息
$message = $channel->basic_get($queue);
$res = $callback($message->getBody());
if ($res){
//ack 验证
$channel->basic_ack($message->getDeliveryTag());
}
$channel->close();
$connection->close();
}
}
?>
如redis同步失败，删除队列重试
