K8S集群搭建

1. 部署K8S集群的两种方式

kubeadm

​ Kubeadm是一个K8s部署工具，提供kubeadm init和kubeadm join，用于快速部署Kubernetes集群。

二进制包

​ 从github下载发行版的二进制包，手动部署每个组件，组成Kubernetes集群。

2. kubeadm部署

机器准备

• 1个master节点

  ​ ip: 192.168.169.131

• 2个node节点

  ​ ip: 192.168.169.132

  ​ ip: 192.168.169.130

安装环境

​ 所有集群节点执行:

#关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
#关闭selinux
sed -i 's/enforcing/disabled/' /etc/selinux/config  # 永久
setenforce 0  # 临时
#关闭swap
swapoff -a  # 临时
sed -ri 's/.*swap.*/#&/' /etc/fstab    # 永久
#规划节点的host-name
hostnamectl set-hostname <hostname>
# 时间同步
yum install ntpdate -y
ntpdate time.windows.com
#安装docker
wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo
yum -y install docker-ce
systemctl enable docker && systemctl start docker
#安装kubeadm、kubelet、kubectl：
yum install -y kubelet-1.23.0 kubeadm-1.23.0 kubectl-1.23.0
systemctl enable kubelet

​ master节点执行:

#master添加hosts
cat >> /etc/hosts << EOF
192.168.169.131 master-node
192.168.169.132 salve-node-1
192.168.169.130 salve-node-2
EOF
#配置镜像下载加速器
{
  "registry-mirrors": ["https://b9pmyelo.mirror.aliyuncs.com"],
  "exec-opts": ["native.cgroupdriver=systemd"]
}
systemctl restart docker
#查看docker信息，进行确认
docker info              
#kubeadm部署
kubeadm init \
  --apiserver-advertise-address=192.168.169.131 \  
  --image-repository registry.aliyuncs.com/google_containers \
  --kubernetes-version v1.23.0 \
  --service-cidr=10.96.0.0/12 \
  --pod-network-cidr=10.244.0.0/16 \
  --ignore-preflight-errors=all
#参数解释
apiserver-advertise-address 集群通告地址
image-repository 由于默认拉取镜像地址k8s.gcr.io国内无法访问，这里指定阿里云镜像仓库地址
kubernetes-version K8s版本，与上面安装的一致
service-cidr 集群内部虚拟网络，Pod统一访问入口
pod-network-cidr Pod网络，与下面部署的CNI网络组件yaml中保持一致
ps:初始化之后，会输出一个join命令，先复制出来，node节点加入master会使用。
#拷贝k8s认证文件
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config  #这里后续有遇到问题

​ node节点执行:

#node节点添加到集群 通过集群初始化打印的kubectl join xx命令，其中有一个token验证，token有效期24小时，失效可使#用命令生成
kubeadm token create --print-join-command

部署容器网络(calico)

​ 下载yaml: wget https://docs.projectcalico.org/v3.14/manifests/calico.yaml

​ 下载完后还需要修改里面定义Pod网络（CALICO_IPV4POOL_CIDR），与前面kubeadm init的 --pod-network-cidr指定的一样

进行部署: 
kubectl apply -f calico.yaml
kubectl get pods -n kube-system            #执行结束要等上一会才全部running

部署可视化界面(Dashboard)

​ 下载yaml: wget https://raw.githubusercontent.com/kubernetes/dashboard/v2.4.0/aio/deploy/recommended.yaml

​ 默认Dashboard只能集群内部访问，修改Service为NodePort类型，暴露到外部：

vi recommended.yaml
...
kind: Service
apiVersion: v1
metadata:
  labels:
    k8s-app: kubernetes-dashboard
  name: kubernetes-dashboard
  namespace: kubernetes-dashboard
spec:
  ports:
    - port: 443
      targetPort: 8443
      nodePort: 30001
  selector:
    k8s-app: kubernetes-dashboard
  type: NodePort
...

#进行部署
kubectl apply -f recommended.yaml
kubectl get pods -n kubernetes-dashboard

​ 访问地址：https://NodeIP:30001

​ 创建service account并绑定默认cluster-admin管理员集群角色：

 # 创建用户
kubectl create serviceaccount dashboard-admin -n kube-system
# 用户授权
kubectl create clusterrolebinding dashboard-admin --clusterrole=cluster-admin --serviceaccount=kube-system:dashboard-admin
# 获取用户Token
kubectl describe secrets -n kube-system $(kubectl -n kube-system get secret | awk '/dashboard-admin/{print $1}')

k8s安装问题处理

初始化问题 节点加入问题

journalctl -xeu kubelet    #查看详细日志
修改docker Cgroup Driver 与 集群保持一致
kubeadm reset  处理初始化 跟 节点加入存在问题 数据

Harbor搭建

​ 机器ip: 192.168.169.134

docker安装

#yum-utils提供了yum-config-manager效用，并device-mapper-persistent-data和lvm2由需要devicemapper存储驱动程序
yum install -y yum-utils device-mapper-persistent-data lvm2
#安装docker
wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo
yum -y install docker-ce
systemctl enable docker && systemctl start docker

安装docker-compose

#下载harbor
curl -L https://github.com/docker/compose/releases/download/v2.2.3/docker-compose-linux-x86_64 -o /usr/local/bin/docker-compose
#授权
chmod +x /usr/local/bin/docker-compose
#查看docker-compose版本
docker-compose --version

安装Harbor

#下载Harbor安装文件
wget https://github.com/goharbor/harbor/releases/download/v1.10.10/harbor-online-installer-v1.10.10.tgz
#解压文件
tar -zxf harbor-online-installer-v1.10.10.tgz
#修改配置
cd harbor 
vi harbor.yml
修改hostname为机器地址，使用的是http，所以https部分需要注掉。
#安装harbor
./install.sh