openstack实现nova-api的HA
1 实验环境
- Openstack juno版本,一个controller(计算节点也在这个物理节点上)和一个网络节点network
- 使用haproxy作为代理软件
- 使用pacemaker作为资源管理工具
- 因为这里只用这两个节点做实验所以这两个节点即作为openstack节点同事也作为ha的主从节点
2 安装配置haproxy
分别在controller和network上安装
2.1 安装
执行 yum install haproxy –y
2.2 配置
修改 /etc/haproxy/haproxy.cfg,如图:
Global为默认:
主要是添加如下内容:
listen nova_compute_api_cluster 172.16.1.5:8774
balance source
option tcpka
option httpchk
option tcplog
server controller 172.16.1.75:8774 weight 1 check inter 10s rise 2 fall 5
server network 172.16.1.74:8774 weight 1 check inter 10s rise 2 fall 5
listen status 172.16.1.5:8001
stats enable
stats uri /stats
stats auth admin:123456
stats realm Global\statistic
编辑文件/etc/sysctl.d/haproxy.conf,添加net.ipv4.ip_nonlocal_bind = 1
3 安装和配置pacemaker
在controller和network上都要安装
3.1 安装
执行yum install pacemaker corosync pcs fence-agents-all –y
修改hacluster密码,执行passwd hacluster
执行systemctl enable pcsd.service pacemaker.service corosync.service和systemctl start pcsd.service
3.2 配置
在控制节点执行
pcs cluster auth controller network
pcs cluster setup --start --name openstack-cluster controller network
pcs cluster enable –all
检查一下状态,执行如下命令:
corosync-cfgtool -s
corosync-cmapctl | grep members
pcs status corosync
pcs status
3.3 集群属性设置
执行如下命令:
pcs property set stonith-enabled=false
pcs property set no-quorum-policy=ignore
pcs resource defaults resource-stickiness=100
crm_verify -L –V
3.4 Vip设置
pcs resource create ClusterIP-01 ocf:heartbeat:IPaddr2 ip=172.16.1.78 cidr_netmask=24 op monitor interval=5s
pcs resource create HAproxy systemd:haproxy op monitor interval=5s
pcs resource group add HAproxyIPs ClusterIP-01
pcs constraint colocation add HAproxy HAproxyIPs INFINITY
pcs constraint order HAproxyIPs then HAproxy
3.5 查看crm状态
crm_mon -1
出错,修改一个keystone endpoint, nova的endpoint要使用vip,进入数据修改keystone数据库,执行update endpoint set url='http://172.16.1.78:8774/v2.0enant_id)s' where url='http://controller:8774/v2.0/%(tenant_id)s';
3.6 登录http://172.16.1.78:8001/stats
查看一下界面如下,可以看到正常登录,到此nova-api的HA就完成了。