LVS DR模式搭建、keepalived + LVS

7月5日任务

18.11 LVS DR模式搭建
18.12 keepalived + LVS
扩展
haproxy+keepalived http://blog.csdn.net/xrt95050/article/details/40926255
nginx、lvs、haproxy比较 http://www.csdn.net/article/2014-07-24/2820837
keepalived中自定义脚本 vrrp_script http://my.oschina.net/hncscwc/blog/158746
lvs dr模式只使用一个公网ip的实现方法 http://storysky.blog.51cto.com/628458/338726

 

18.11 LVS DR模式搭建

1、准备工作和做NAT一样，需要3台机器，同时要把002和003的网关改回默认网关。

[root@jimmylinux-002 ~]# vi /etc/sysconfig/network-scripts/ifcfg-ens33

[root@jimmylinux-003 ~]# vi /etc/sysconfig/network-scripts/ifcfg-ens33

默认网关为 192.168.52.2

systemctl restart network.service  修改完成重启网卡服务 

2、在dir分发器上面创建一个脚本文件

vim /usr/local/sbin/lvs_dr.sh 

增加以下内容

#! /bin/bash
echo 1 > /proc/sys/net/ipv4/ip_forward
ipv=/usr/sbin/ipvsadm
vip=192.168.52.200
rs1=192.168.52.129
rs2=192.168.52.130
#注意这里的网卡名字
ifdown ens33
ifup ens33
ifconfig ens33:2 $vip broadcast $vip netmask 255.255.255.255 up    命令方式设置IP
route add -host $vip dev ens33:2    添加网关
$ipv -C    清空规则
$ipv -A -t $vip:80 -s rr
$ipv -a -t $vip:80 -r $rs1:80 -g -w 1
$ipv -a -t $vip:80 -r $rs2:80 -g -w 1

3、执行刚才编辑的脚本

4、两台rs上也编写脚本 vim /usr/local/sbin/lvs_rs.sh 保存后执行脚本sh /usr/local/sbin/lvs_rs.sh

vim /usr/local/sbin/lvs_rs.sh

添加以下内容

#/bin/bash
vip=192.168.52.200
#把vip绑定在lo上，是为了实现rs直接把结果返回给客户端
ifdown lo
ifup lo
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#以下操作为更改arp内核参数，目的是为了让rs顺利发送mac地址给客户端
#参考文档www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce

查看VIP的路由及lo的IP地址

 

开始测试

可以在浏览器输入 192.168.52.200 进行访问，会出现不同的显示结果，当访问量到达一定数量时，就会启到负载均衡的效果，就算B或C其中一台机器宕机了，会自动切换到正常使用的机器，公司业务不会受到任何影响。

也可以使用命令查看lvs状态

 

18.12 keepalived + LVS

LVS存在一个很关键的角色，因为所有的请求都会通过Director去转发到Real server，如果Director宕机，我们的所有服务均会被停止掉。所以我们会把keepalived放在这儿，实现DR的高可用，这样就会完美的解决问题！

完整架构需要两台服务器（角色为dir）分别安装keepalived软件，目的是实现高可用，但keepalived本身也有负载均衡的功能，所以本次实验可以只安装一台keepalived。

1、准备3台机器，A机器为Director（安装keepalived）192.168.52.128，B机器为RS1（192.168.52.129）C机器为RS2（192.168.52.130）另外需要一个VIP IP地址为192.168.52.200

2、编辑配置文件/etc/keepalived/keepalived.conf

vim /etc/keepalived/keepalived.conf  

清空之前的配置文件内容，重新添加以下内容。

vrrp_instance VI_1 {
    #备用服务器上为 BACKUP
    state MASTER
    #绑定vip的网卡为ens33，你的网卡和阿铭的可能不一样，这里需要你改一下
    interface ens33
    virtual_router_id 51
    #备用服务器上为90
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass abcd1234
    }
    virtual_ipaddress {
        192.168.52.200
    }
}
virtual_server 192.168.52.200 80 {
    #(每隔10秒查询realserver状态)
    delay_loop 10
    #(lvs 算法)
    lb_algo wlc
    #(DR模式)
    lb_kind DR
    #(同一IP的连接60秒内被分配到同一台realserver)
    persistence_timeout 0
    #(用TCP协议检查realserver状态)
    protocol TCP

    real_server 192.168.52.128 80 {
vrrp_instance VI_1 {
    #备用服务器上为 BACKUP
    state MASTER
    #绑定vip的网卡为ens33，你的网卡和阿铭的可能不一样，这里需要你改一下
    interface ens33
    virtual_router_id 51
    #备用服务器上为90
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass abcd1234
    }
    virtual_ipaddress {
        192.168.52.200
    }
}
virtual_server 192.168.52.200 80 {
    #(每隔10秒查询realserver状态)
    delay_loop 10
    #(lvs 算法)
    lb_algo wlc
    #(DR模式)
    lb_kind DR
    #(同一IP的连接60秒内被分配到同一台realserver)
    persistence_timeout 0
    #(用TCP协议检查realserver状态)
    protocol TCP

    real_server 192.168.52.128 80 {
    #(每隔10秒查询realserver状态)
    delay_loop 10
    #(lvs 算法)
    lb_algo wlc
    #(DR模式)
    lb_kind DR
    #(同一IP的连接60秒内被分配到同一台realserver)
    persistence_timeout 0
    #(用TCP协议检查realserver状态)
    protocol TCP

    real_server 192.168.52.129 80 {
        #(权重)
        weight 100
        TCP_CHECK {
        #(10秒无响应超时)
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
    }
    real_server 192.168.52.130 80 {
        weight 100
        TCP_CHECK {
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
     }
}

3、启动keepalived 服务并查看规则

4、在浏览器输入 192.168.52.200 进行访问，会出现不同的显示结果，当访问量到达一定数量时，或者当B或C机器宕机了，就会启到负载均衡的效果，能够访问至其他RS上去，业务不会中断。

两台rs上，依然要执行/usr/local/sbin/lvs_rs.sh脚本，keepalived有一个比较好的功能，可以在一台rs宕机时，不再把请求转发过去。