keepalived实现主备服务器冗余双活+负载均衡

keepalived是一个类似于layer3, 4 & 5交换机制的软件，也就是我们平时说的第3层、第4层和第5层交换。Keepalived是自动完成，不需人工干涉。

使用keepalived主要两个功能：

1、keepalived实现主备机冗余功能

如果用nignx做负载均衡服务器，万一负载均衡服务器宕机了，也就挂了。

而keepalived通过VIP完美解决了这个问题，keepalived的主备机共用VIP,VIP对外提供访问，主机宕机了，备机会立即启动将VIP占用，接替主机的工作。

2、对后端的web服务器负载均衡（冗余）+健康监测

Keepalived的作用是检测服务器的状态，如果有一台web服务器宕机，或工作出现故障，Keepalived将检测到，并将有故障的服务器从系统中剔除，同时使用其他服务器代替该服务器的工作，当服务器工作正常后Keepalived自动将服务器加入到服务器群中，这些工作全部自动完成，不需要人工干涉，需要人工做的只是修复故障的服务器。

 

开始搭建

示例服务器

服务器IP端口
VIP192.168.61.59 
keepalived主机:NODE1192.168.61.55 
keepalived备机:NODE2192.168.61.57 
web服务器1:WEB1192.168.61.5610001
web服务器2:WEB2192.168.61.5810001

1 安装keepalived（NODE1和NODE2）

最好先更新软件一下

yum update

1.1 安装keepalived依赖 gcc和openssl-devel

yum -y install gcc openssl-devel

1.2 安装keepalived

yum -y install keepalived

2 修改keepalivd配置文件（NODE1和NODE2）

配置文件路径：/etc/keepalived/keepalived.conf。建议下载修改，修改完重新上传

NODE1配置文件如下

! Configuration File for keepalived

global_defs {
#   notification_email {
#     acassen@firewall.loc
#     failover@firewall.loc
#     sysadmin@firewall.loc
#   }
#   notification_email_from Alexandre.Cassen@firewall.loc
#   smtp_server 192.168.200.1
#   smtp_connect_timeout 30
   router_id NODE1
#   vrrp_skip_check_adv_addr
#   vrrp_strict
   vrrp_garp_interval 0
   vrrp_gna_interval 0
}

vrrp_instance VI_1 {
    state MASTER
    interface ens192
    virtual_router_id 101
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.61.59
    }
}

virtual_server 192.168.61.59 10001 {
    delay_loop 3
    lb_algo wrr
    lb_kind DR
    persistence_timeout 60
    protocol TCP

    real_server 192.168.61.56 10001 {
        weight 2
        HTTP_GET {
            url { 
              path /cnic/
              digest 63bad2e94270298fe051dc7ed342d71d
            }
            connect_timeout 2
            nb_get_retry 3
            delay_before_retry 2
        }


    }
    real_server 192.168.61.58 10001 {
        weight 1
        HTTP_GET {
            url {
              path /cnic/
              digest 63bad2e94270298fe051dc7ed342d71d
            }
            connect_timeout 2
            nb_get_retry 3
            delay_before_retry 2
        }
    }
}

NODE2配置文件如下

! Configuration File for keepalived

global_defs {
#   notification_email {
#     acassen@firewall.loc
#     failover@firewall.loc
#     sysadmin@firewall.loc
#   }
#   notification_email_from Alexandre.Cassen@firewall.loc
#   smtp_server 192.168.200.1
#   smtp_connect_timeout 30
   router_id NODE2
#   vrrp_skip_check_adv_addr
#   vrrp_strict
   vrrp_garp_interval 0
   vrrp_gna_interval 0
}

vrrp_instance VI_1 {
    state BACKUP
    interface ens192
    virtual_router_id 101
    priority 10
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.61.59
    }
}

virtual_server 192.168.61.59 10001 {
    delay_loop 3
    lb_algo wrr
    lb_kind DR
    persistence_timeout 60
    protocol TCP

    real_server 192.168.61.56 10001 {
        weight 2
        HTTP_GET {
            url { 
              path /cnic/
              digest 63bad2e94270298fe051dc7ed342d71d
            }
            connect_timeout 2
            nb_get_retry 3
            delay_before_retry 2
        }


    }
    real_server 192.168.61.58 10001 {
        weight 1
        HTTP_GET {
            url {
              path /cnic/
              digest 63bad2e94270298fe051dc7ed342d71d
            }
            connect_timeout 2
            nb_get_retry 3
            delay_before_retry 2
        }
    }
}

BCompare一下，主备机配置文件3处不同

配置文件中的digest（摘要）生成方法：

使用genhash（genhash是keepalived自带的，安装了keepalived就可以用了），语法：

http：   genhash -s [IP] -p [端口号] -u [url]

https： genhash -S -s [IP] -p [端口号] -u [url]

详细说明如下图

 

本文以/cnic/为例

genhash -s 192.168.61.58 -p 10001 -u /cnic/

配置文件有一行 “interface ens192” 。ens192是网卡编号  ，用命令  ip a 查看

更多keepalived配置文件详解：

https://blog.csdn.net/lishuoboy/article/details/89919939

 

3 防火墙设置添加放行端口（NODE1、NODE2、WEB1、WEB2）

你可以简单粗暴点直接关闭防火墙，本文不推荐，略。

3.1 添加防火墙例外端口（centOS）

查看例外端口：firewall-cmd --list-all

添加10001端口：firewall-cmd --zone=public --add-port=10001/tcp --permanent

使生效（必须）：firewall-cmd --reload

添加完成后如下：

防火墙的命令参考https://blog.csdn.net/lishuoboy/article/details/88301273

 

4 防火墙设置放行回环ip（NODE1、NODE2、WEB1、WEB2）

firewall-cmd --direct --permanent --add-rule ipv4 filter INPUT 0 --in-interface ens192 --destination 224.0.0.18 --protocol vrrp -j ACCEPT

ens192是网卡，用ip a命令查看

224.0.0.18是keepalived的默认广播地址

5 启用ip转发（NODE1、NODE2）

vim /etc/sysctl.conf

加入 net.ipv4.ip_forward = 1 

保存退出：按esc，然后输入:wq按回车

重载/etc/sysctl.conf使生效

sysctl -p

6、将VIP添加的网络回环中（NODE1、NODE2、WEB1、WEB2）(我测试NODE1、NODE2好像不需要)

编写一个将vip（192.168.61.59）添加到网络回环的脚本/usr/bin/setvip.sh，内容如下

#!/bin/bash
#description: Config virtual IP address

VIP=192.168.61.59/32  #32是子网掩码，用32保证这一个网段只有一个ip，按需设置

case "$1" in
start)
       ip addr add $VIP dev lo:1
       echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
       echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
       echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
       echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
       sysctl -p >/dev/null 2>&1
       echo "VIP has added"
       ;;
stop)
       ip addr del $VIP dev lo:1
       echo "0" >/proc/sys/net/ipv4/conf/lo/arp_ignore
       echo "0" >/proc/sys/net/ipv4/conf/lo/arp_announce
       echo "0" >/proc/sys/net/ipv4/conf/all/arp_ignore
       echo "0" >/proc/sys/net/ipv4/conf/all/arp_announce
       echo "VIP has deleted."
       ;;
*)
       echo "Usage: $0 {start|stop}"
       exit 1
esac

exit 0

添加执行权限

chmod +x /usr/bin/setvip.sh

添加VIP到网络回环

setvip.sh start

start之前（lo：网络回环loopback）↓

start之后↓（lo：网络回环loopback）

 stop之后↓（lo：网络回环loopback）

 

7、调整SELinux安全策略NODE1、NODE2）

SELinux知识参考：https://blog.51cto.com/13570193/2093299

7.2 将SELinux策略改为警告

7.2.1 先临时改了

setenforce 0

ps：setenforce 0|1  分别代表permissive（放纵的）、enforcing（强制） 

查看SELinux状态

getenforce

7.2.2 设置SELinux永久为permissive（放纵的）

为防止服务器重启后SELinux模式恢复默认，设置SELINUX=permissive永久生效。

vim /etc/selinux/config

重启后验证一下

reboot
getenforce

 

8 设置keepalived、setvip开机自启动（NODE1、NODE2、WEB1、WEB2）

这一步可以放到最后

centOS开启关闭服务，查看设置开机自启动参考 https://blog.csdn.net/lishuoboy/article/details/89676041

8.1 设置keepalived开机自启（NODE1、NODE2）

设置开机自启动

systemctl enable keepalived

查看是否开机自启

systemctl is-enabled keepalived

 

8.2 设置setvip开机自启（WEB1、WEB2）（NODE1、NODE2不需要，但是有问题就加上)

自定义服务setvip.service

新建文件/etc/systemd/system/setvip.service

文件内容如下

[Unit]
Description=setvip

[Service]
TimeoutStartSec=0
Type=forking
ExecStart=/usr/bin/setvip.sh start

[Install]
WantedBy=multi-user.target

放开setvip.sh执行权限

chmod +x /usr/bin/setvip.sh

放开setvip.service执行权限

chmod +x /etc/systemd/system/setvip.service

设置开机自启动

systemctl enable setvip

查看是否开机自启

systemctl is-enabled setvip

 

8.3 设置重启网络服务时同时启动setvip服务

重启网络命令如下，在命令执行后网络回环中VIP会消失。

systemctl restart network

所以需要在重启网络的时候调用setvip.sh

修改 /etc/rc.d/init.d/network  文件

加入  /bin/setvip.sh start 

 

9 启动keepalived（NODE1、NODE2）

搞了这么多，终于可以启动了，启动命令：

systemctl start keepalived

查看状态 

systemctl status keepalived

查看启动日志

tail -f /var/log/messages

启动日志 

 日志发现后端两台WEB1和WEB2应用连不上，应为web应用还没启动。在下一步验证时启动

启动后，keepalived主机会将VIP绑定到主机物理网卡ens192上，如果主机宕机，备机会将VIP绑定到备机物理网卡上

看一下LVS

ipvsadm -L

如果没有ipvsadm，先安装

yum -y install ipvsadm

10、充分验证测试

10.1 keepalived主备机(NODE1、NODE2)单点故障验证测试

10.2 WEB1、WEB2单点故障故障验证测试

 

posted on   小石头小祖宗  阅读(96)  评论(0)  编辑  收藏  举报  

编辑推荐：
· 开发者必知的日志记录最佳实践
· SQL Server 2025 AI相关能力初探
· Linux系列：如何用 C#调用 C方法造成内存泄露
· AI与.NET技术实操系列（二）：开始使用ML.NET
· 记一次.NET内存居高不下排查解决与启示
阅读排行：
· 阿里最新开源QwQ-32B，效果媲美deepseek-r1满血版，部署成本又又又降低了！
· 开源Multi-agent AI智能体框架aevatar.ai，欢迎大家贡献代码
· Manus重磅发布：全球首款通用AI代理技术深度解析与实战指南
· 被坑几百块钱后，我竟然真的恢复了删除的微信聊天记录！
· AI技术革命，工作效率10个最佳AI工具
< 2025年3月 >
日 一 二 三 四 五 六
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

导航

统计

点击右上角即可分享
微信分享提示
AI IDE Trae