Keepalived+LVS-DR+Nginx高可用故障切换模式
LVS架构中,不管是NAT模式还是DR模式,当后端的RS宕掉后,调度器依然会把请求转发到宕掉的RS上,这样的结果并不是我们想要的。其实,keepalived就可以解决问题,它不仅仅有高可用的功能,还有负载均衡。也就是说keepalived已经嵌入了LVS功能,完整的keepalived+LVS架构需要有两台调度器实现高可用,提供调度器的只需要一台,另外一台作为备用。LVS架构模式了解:【Linux】虚拟服务器之LVS
准备:
1,四台服务器或虚拟机:
主keepalived(调度器):192.168.243.133 (keepalived和ipvsadm)
从keepalived(调度器):192.168.243.134 (keepalived和ipvsadm)
- 真实服务器rs1:192.168.243.135 (nginx)
- 真实服务器rs2:192.168.243.136 (nginx)
- VIP:192.168.243.100
2,keepalived的安装:【keepalived】CentOS7.0下安装教程
3,时间同步+防火墙设置+SELinux设置:【Linux】时间同步设置+防火墙设置+SELinux设置
4,安装ipvsadm,这是实现LVS的核心工具,一条命令即可:
yum install -y ipvsadm
5,真实服务器安装Nginx:【Nginx】Nginx简介及在CentOS7.0下安装教程
进入正题:
1,编辑keepalived的配置文件:
vi /usr/local/keepalived-1.3.4/etc/keepalived/keepalived.conf
这是配置文件里面的一些内容:
vrrp_instance VI_1 {
#备用服务器上为 BACKUP
state MASTER
#绑定vip的网卡为ens33,根据自己的服务器来设置
interface ens33
virtual_router_id 51
#备用服务器上为90
priority 100
advert_int 1
authentication {
auth_type PASS
auth_pass 1111
}
virtual_ipaddress {
192.168.243.100
}
}
virtual_server 192.168.243.100 80 {
#(每隔10秒查询realserver状态)
delay_loop 10
#(lvs 算法)
lb_algo rr
#(DR模式)
lb_kind DR
#(同一IP的连接60秒内被分配到同一台realserver)
persistence_timeout 60
#(用TCP协议检查realserver状态)
protocol TCP
#真实服务器(nginx)
real_server 192.168.243.135 80 {
#(权重)
weight 100
TCP_CHECK {
#(10秒无响应超时)
connect_timeout 10
nb_get_retry 3
delay_before_retry 3
connect_port 80
}
}
#真实服务器(nginx)
real_server 192.168.243.136 80 {
weight 100
TCP_CHECK {
connect_timeout 10
nb_get_retry 3
delay_before_retry 3
connect_port 80
}
}
}
2,这里在keepalived的配置文件中定义的LVS模式为DR模式,还需要在两台rs上执行lvs_dr_rs.sh脚本
vi /usr/local/sbin/lvs_dr_rs.sh
将下面内容可粘贴至该脚本文件中:
#/bin/bash
vip=192.168.243.100
#把vip绑定在lo上,是为了实现rs直接把结果返回给客户端
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#以下操作为更改arp内核参数,目的是为了让rs顺利发送mac地址给客户端
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
3,执行:sh /usr/local/sbin/lvs_dr_rs.sh
4,在两台真实服务器上面执行完毕之后,执行ip addr就能看到两台服务器的lo都绑定好了虚拟ip,如图:
注意:服务器重启之后绑定的这个虚拟ip就没有了,需要再执行一下脚本,所以可以把对这个脚本的执行放到开机自启中。
执行命令:vi /etc/rc.d/rc.local
将以下内容添加至该文件中:sh /usr/local/sbin/lvs_dr_rs.sh
保存退出,然后添加执行权限:chmod +x rc.local
之后,在133上启动keepalived服务:systemctl start keepalived
执行ip addr,可以看到在ens33上面绑定的虚拟ip,如图:
然后可以在调度器133上执行命令ipvsadm -ln查看连接数,如图:
当我把135关掉之后,就只有一台在连接了
高可用故障切换模式,这个功能实现的有些难度,钻研了好几天才出来,主要是因为这里面的逻辑不是太好理清楚。每次开4个虚拟机做实验,CPU都飙到87%也是很酸爽,很害怕下一秒笔记本就崩掉~
最后上一张,根据我的理解,画的逻辑图:
感谢您的阅读~