docker部署rabbitmq集群

docker版本：18.09.6 或以上

rabbitmq镜像版本：rabbitmq:3.9.5-management

 

一、拉镜像：

docker pull rabbitmq:3.9.5-management

二、查看镜像erlang cookie: 

docker run --rm rabbitmq:3.9.5-management

ctrl - c 结束运行（自动删除容器，不用关心这个临时容器）

 

三、输出的日志中找到"cookie hash": sFDpr2/hTjqLDpdtOgrhpg==

四、创建docker swarm集群（单节点直接为管理节点，多节点创建docker集群）：

docker swarm init --default-addr-pool 200.0.0.0/24 --advertise-addr 172.16.11.54

说明：

这是必要的步骤，先组件docker集群，不然无法使用后续步骤需要的“机要信息存储”和“服务集群”

--default-addr-pool为在该集群内的隧道ip，给容器用的，

--advertise-addr 172.16.11.54这是本机物理ip为组建docker集群用的，

执行后需要记录好反馈信息。

Swarm initialized: current node (azez8x2ae1u3l5uqwpexf3yi2) is now a manager.
To add a worker to this swarm, run the following command:
    docker swarm join --token SWMTKN-1-4mo2do1p8oxgcou36dhzd1o8lbvr7ecxh0ecdfza9pt1a47tez-1yuyuqo9cm252nsdz7bov68ir 172.16.11.54:2377
To add a manager to this swarm, run 'docker swarm join-token manager' and follow the instructions.

五、利用docker机要信息存储erlang cookie：

printf "KYSleSjVyzf0Gej+eiPpCQ==" | docker secret create doc-rabbit-erlcookie -

六、创建一个用于给rabbitmq集群内部使用的网络：(这一步不是必要的，但推荐执行，便于管理这一层网络)

docker network create \
  --driver overlay \
  rabbitmq_network

七、在docker集群中可以直接创建rabbitmq服务集群：

docker service create --container-label doc-rabbit --replicas 3 \
--name doc-rabbitmq \
-p 5672:5672 -p 15672:15672 \
--network rabbitmq_network \
--secret source=doc-rabbit-erlcookie,target=/var/lib/rabbitmq/.erlang.cookie,uid=999,gid=999,mode=0600 \
rabbitmq:3.9.5-management

解释：

使用rabbitmq:3.9.5-management镜像创建集群

使用机要doc-rabbit-erlcookie（参考第4步）存储的信息，放在集群每个容器的/var/lib/rabbitmq/.erlang.cookie文件中，并且明确文件属组和权限，这里是rabbitmq对它有这样的要求

定义容器标签：--container-label doc-rabbit

定义容器副本个数（规模，我这里是3个扩展）--replicas 3 

定义容器主机名--hostname doc-rabbitmq

定义这个服务集群的名字--name doc-rabbitmq

八、由于直接使用docker，未找到资料证明可以自动构建集群的方式，k8s下可以参考rabbitmq官方文档，其中有关于在k8s下构建的两种方式，和相应k8s插件

开始构建集群

使用docker ps 查看容器名称，其命名规则是扩展容器逻辑名称.扩展节点id

使用docker service ps doc-rabbitmq 查看服务中的扩展容器逻辑名称和相应id

通过以上两个指令，找到相应3个扩展容器，记录容器的id，就是记录docker ps查看到的第一列的id号

通过docker service方式定义的容器组，每个容器默认的hostname就是容器id

对容器进行伪终端操作，

规划一下rabbitmq主节点、磁盘节点、内存节点，例如：rabbitmq1(容器名是abcdefg)是主节点同时是磁盘节点，rabbitmq2(容器名是hijklmn)，rabbitmq3(容器名是opqrst)是内存节点

docker exec rabbitmq2 rabbitmqctl stop_app && rabbitmqctl join_cluster rabbit@abcdefg --ram && rabbitmqctl start_app 
docker exec rabbitmq3 rabbitmqctl stop_app && rabbitmqctl join_cluster rabbit@abcdefg --ram && rabbitmqctl start_app 

两个内存节点加入集群后，rabbitmq集群就搭建完成了，

这里不是docker的使用风格，不该由容器进行操作构建集群，所以这里需要仍需要后续探索。

9、验证

因为在docker服务构建过程中，使用了端口映射，可以从docker节点的物理机ip直接进行访问，这里底层是ipvs，所以任意docker swarm的集群物理ip都能访问

浏览器访问：http://172.16.11.54:15672，用户名密码都是默认的guest。

 

参考资料：

https://hub.docker.com/_/rabbitmq

https://docs.docker.com/engine/reference/commandline/service_create/#create-a-service-with-secrets

https://docs.docker.com/engine/swarm/secrets/