k8s集群安装

【硬件要求】

　　 cpu：至少2核

　　内存：至少3G

　　硬盘：至少50G

【软件版本】

 　　操作系统：centos 7.6以上版本（下载地址）

　　k8s: 1.17.5

 　　docker: 

【配置阿里云yum源 】　

1.下载安装wget
yum install -y wget

2.备份默认的yum
mv /etc/yum.repos.d /etc/yum.repos.d.backup

3.设置新的yum目录
mkdir -p /etc/yum.repos.d

4.下载阿里yum配置到该目录中，选择对应版本
wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo

5.更新epel源为阿里云epel源
mv /etc/yum.repos.d/epel.repo /etc/yum.repos.d/epel.repo.backup
mv /etc/yum.repos.d/epel-testing.repo /etc/yum.repos.d/epeltesting.repo.backup
wget -O /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo

6.重建缓存
yum clean all
yum makecache

7.看一下yum仓库有多少包
yum repolist
yum update

【升级系统内核 】

rpm -Uvh http://www.elrepo.org/elrepo-release-7.0-3.el7.elrepo.noarch.rpm
yum --enablerepo=elrepo-kernel install -y kernel-lt
grep initrd16 /boot/grub2/grub.cfg
grub2-set-default 0
reboot

 【系统配置】

1、关闭防火墙

systemctl stop firewalld
systemctl disable firewalld

 

2、关闭selinux

sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/sysconfig/selinux
setenforce 0

 

3、网桥过滤

vi /etc/sysctl.conf

net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.bridge.bridge-nf-call-arptables = 1
net.ipv4.ip_forward=1
net.ipv4.ip_forward_use_pmtu = 0


生效命令
sysctl --system
查看效果
sysctl -a|grep "ip_forward"

 

4、开启ipvs

安装IPVS
yum -y install ipset ipvsdm
编译ipvs.modules文件
vi /etc/sysconfig/modules/ipvs.modules
文件内容如下
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4
赋予权限并执行
chmod 755 /etc/sysconfig/modules/ipvs.modules && bash /etc/sysconfig/modules/ipvs.modules && lsmod | grep -e ip_vs -e nf_conntrack_ipv4
重启电脑，检查是否生效
reboot
lsmod | grep ip_vs_rr

 

5、同步时间

安装软件
yum -y install ntpdate
向阿里云服务器同步时间
ntpdate time1.aliyun.com
删除本地时间并设置时区为上海
rm -rf /etc/localtime
ln -s /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
查看时间
date -R || date

6、命令补全

安装bash-completion
yum -y install bash-completion bash-completion-extras
使用bash-completion
source /etc/profile.d/bash_completion.sh

 

 7、关闭swap分区

临时关闭：
swapoff -a

永久关闭：
vi /etc/fstab
将文件中的/dev/mapper/centos-swap这行代码注释掉
#/dev/mapper/centos-swap swap swap defaults 0 0


确认swap已经关闭：若swap行都显示 0 则表示关闭成功
free -m

 

【安装docker】

1、安装前置条件

yum install -y yum-utils device-mapper-persistent-data lvm2

 

2、添加源

yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
yum makecache fast

 

3、查看docker版本

yum list docker-ce --showduplicates | sort -r

 

4、安装docker

yum -y install docker-ce

安装指定版本：
yum -y install docker-ce-18.09.8


可以通过docker version命令查看
docker-client版本：当前最新版本
docker-server版本为：18.09.8

 

5、开启docker

systemctl start docker

设置开机启动
systemctl enable docker

 

6、设置镜像加速器

mkdir -p /etc/docker
tee /etc/docker/daemon.json <<-'EOF'
{
"registry-mirrors": ["自己的阿里云镜像加速地址"]
} 
EOF
systemctl daemon-reload
systemctl restart docker

 

7、修改Cgroup Driver

修改daemon.json，新增：
"exec-opts": ["native.cgroupdriver=systemd"]

重启docker服务：
systemctl daemon-reload
systemctl restart docker

查看修改后状态：
docker info | grep Cgroup

 

 【使用kubeadm快速安装 】

1、新建repo文件

vi /etc/yum.repos.d/kubernates.repo
内容如下：
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=1
repo_gpgcheck=1
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg
       https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg

更新缓存
yum clean all
yum -y makecache 

验证源是否可用
yum list | grep kubeadm
如果提示要验证yum-key.gpg是否可用，输入y。
查找到kubeadm。显示版本 

 

2、安装k8s-1.17.5

1、查看k8s版本
yum list kubelet --showduplicates | sort -r
2、安装k8s-1.17.5
yum install -y kubelet-1.17.5 kubeadm-1.17.5 kubectl-1.17.5

 

3、增加配置信息

vi /etc/sysconfig/kubelet

KUBELET_EXTRA_ARGS="--cgroup-driver=systemd"

 

4、设置开机启动

systemctl enable kubelet

 

【初始化镜像】

1、查看安装集群需要的镜像

kubeadm config images list

 2、编写执行脚本

mkdir -p /data
cd /data
vi images.sh
#!/bin/bash
# 下面的镜像应该去除"k8s.gcr.io"的前缀，版本换成kubeadm config images list命令获取
到的版本
images=(
kube-apiserver:v1.17.5
kube-controller-manager:v1.17.5
kube-scheduler:v1.17.5
kube-proxy:v1.17.5
pause:3.1
etcd:3.4.3-0
coredns:1.6.5
) 
for imageName in ${images[@]} ;
do
docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/$imageName
docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/$imageName k8s.gcr.io/$imageName
docker rmi registry.cn-hangzhou.aliyuncs.com/google_containers/$imageName
done

 

 3、执行脚本

mkdir -p /data
cd /data
给脚本授权
chmod +x images.sh
执行脚本
./imag

 

4、保存镜像

docker save -o k8s.1.17.5.tar \
k8s.gcr.io/kube-proxy:v1.17.5 \
k8s.gcr.io/kube-apiserver:v1.17.5 \
k8s.gcr.io/kube-controller-manager:v1.17.5 \
k8s.gcr.io/kube-scheduler:v1.17.5 \
k8s.gcr.io/coredns:1.6.5 \
k8s.gcr.io/etcd:3.4.3-0 \
k8s.gcr.io/pause:3.1 

 

 

--------------------------------

前面步骤master node节点基本一致，后续操作master node 有不一致地方。我使用的virtual box虚拟机，所以在此次克隆2个node节点出来

 

 

 【配置集群网络】

1、修改主机名（切记集群的中节点主机名不能相同）（所有节点执行）

hostnamectl set-hostname k8s-master01

 

 2、修改ip映射（所有节点执行）

vi /etc/hosts
增加如下内容
192.168.0.100 k8s-master
192.168.0.101 k8s-node1
192.168.0.102 k8s-node2
192.168.0.103 k8s-node3

 

3、master节点上 calico官网地址 ,保存calico.yml
　　https://docs.projectcalico.org/v3.14/manifests/calico.yaml 

4、master 节点上 初始化集群信息:calico网络

kubeadm init --apiserver-advertise-address=192.168.0.100 --kubernetesversion v1.17.5 --service-cidr=10.1.0.0/16 --pod-network-cidr=10.81.0.0/16

 

 5、master节点上 执行配置命令

mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config

6、master节点上执行网络配置

kubectl apply -f calico.yaml

 

 

7、所有node节点上执行，加入集群 （每个集群的token都不一样，修改成你自己的）

kubeadm join 192.168.0.108:6443 --token b19vzp.pwtyde3131tbvyd7 \
    --discovery-token-ca-cert-hash sha256:3f472aed39c32653007c4629860bc7026fdfcffb28d6722d8b5085dd7310d641

 

 8、kubectl命令自动补全 （所有节点执行）

　

echo "source <(kubectl completion bash)" >> ~/.bash_profile
source ~/.bash_profile

 

 

 9、查看集群节点，进行验证

kubectl get nodes