k8s多master节点配置高可用

你们集群的master是单master还是多master

多master是如何建立高可用的？

负载均衡器（Load Balancer）：

通过使用负载均衡器，如Nginx或HAProxy，可以实现对kube-apiserver的负载均衡和反向代理。这确保了客户端请求可以均匀地分配到多个Master节点上。

Keepalived：

使用Keepalived软件可以实现虚拟IP（VIP）的高可用性。Keepalived会监控Master节点的状态，并在主节点故障时自动将VIP转移到备用节点上，从而实现故障转移。

要使用Nginx实现Kubernetes多Master节点的高可用负载均衡，可以按照以下步骤进行配置：
准备负载均衡器：

确保你有足够的机器来部署Nginx负载均衡器。这些机器将不参与Kubernetes集群的其他角色，专门用于负载均衡。

安装Nginx：

在负载均衡器上安装Nginx。可以使用包管理器安装，例如在CentOS上可以使用yum install nginx命令。
配置Nginx：
配置Nginx以使用流（stream）模块，该模块用于四层负载均衡。以下是一个基本的配置示例，它监听16443端口（kube-apiserver默认端口为6443，但负载均衡器应使用不同的端口以避免冲突），并将流量转发到多个Master节点的kube-apiserver：
user nginx;
worker_processes auto;
error_log /var/log/nginx/error.log;
pid /run/nginx.pid;
include /usr/share/nginx/modules/*.conf;
events {
    worker_connections  1024;
}
stream {
    log_format  main  '$remote_addr $upstream_addr - [$time_local] $status $upstream_bytes_sent';
    access_log  /var/log/nginx/k8s-access.log  main;
    upstream k8s-apiserver {
        server 192.168.116.141:6443 weight=5 max_fails=3 fail_timeout=30s;
        server 192.168.116.142:6443 weight=5 max_fails=3 fail_timeout=30s;
        server 192.168.116.143:6443 weight=5 max_fails=3 fail_timeout=30s;
    }
    server {
        listen 16443;
        proxy_pass k8s-apiserver;
    }
}
确保替换server块中的IP地址和端口为你的Master节点的IP地址和kube-apiserver端口。
启动Nginx并设置开机自启：
重启Nginx服务以应用配置更改：
systemctl restart nginx
systemctl enable nginx
使用Keepalived实现高可用：
在负载均衡器上安装Keepalived，并配置它以使用VRRP（虚拟路由冗余协议）在多个负载均衡器之间共享一个虚拟IP。这样，如果一个负载均衡器失败，另一个可以接管其IP地址和职责。
配置Keepalived的示例如下：
global_defs {
  notification_email {
    acassen@firewall.loc
    failover@firewall.loc
    sysadmin@firewall.loc
  }
  notification_email_from Alexandre.Cassen@firewall.loc
  smtp_server 127.0.0.1
  smtp_connect_timeout 30
  router_id NGINX_MASTER
}
vrrp_script check_nginx {
  script "/etc/keepalived/check_nginx.sh"
}
vrrp_instance VI_1 {
  state MASTER
  interface ens160
  virtual_router_id 51
  priority 100
  advert_int 1
  authentication {
    auth_type PASS
    auth_pass 1111
  }
  virtual_ipaddress {
    192.168.116.100
  }
  track_script {
    check_nginx
  }
}
确保替换interface、virtual_ipaddress和脚本中的配置以匹配你的环境。
测试配置：

确保所有配置都正确无误后，可以通过停止一个Master节点或Nginx服务来测试故障转移机制是否正常工作。
通过以上步骤，你可以使用Nginx和Keepalived为Kubernetes多Master节点配置高可用的负载均衡。这样，即使某个Master节点或负载均衡器发生故障，集群仍然可以通过其他节点继续提供服务。