k8s介绍与常用命令

kubernetes基础与常用命令

安装工具

在 Linux 系统中安装并设置 kubectl

用 curl 在 Linux 系统中安装 kubectl

  • curl -LO "https://dl.k8s.io/release/$(curl -L -s https://dl.k8s.io/release/stable.txt)/bin/linux/amd64/kubectl"

  • 如需下载某个指定的版本，请用指定版本号替换该命令的这一部分： $(curl -L -s https://dl.k8s.io/release/stable.txt)。

  • 例如，要在 Linux 中下载 v1.25.0 版本，请输入：

  • curl -LO https://dl.k8s.io/release/v1.25.0/bin/linux/amd64/kubectl

  • 验证该可执行文件（可选步骤）

  • 下载 kubectl 校验和文件：

    • curl -LO "https://dl.k8s.io/$(curl -L -s https://dl.k8s.io/release/stable.txt)/bin/linux/amd64/kubectl.sha256"

    • 基于校验和文件，验证 kubectl 的可执行文件：

      • echo "$(cat kubectl.sha256) kubectl" | sha256sum --check

    • 下载的 kubectl 与校验和文件版本必须相同。

  • 安装 kubectl

  • sudo install -o root -g root -m 0755 kubectl /usr/local/bin/kubectl

  • 说明：

    • 即使你没有目标系统的 root 权限，仍然可以将 kubectl 安装到目录 ~/.local/bin 中：
    • chmod +x kubectl
    • mkdir -p ~/.local/bin
    • mv ./kubectl ~/.local/bin/kubectl
    • 之后将 ~/.local/bin 附加（或前置）到 $PATH

  • 执行测试，以保障你安装的版本是最新的：

  • kubectl version --client

用原生包管理工具安装

基于debian的发行版（apt）

  • 更新 apt 包索引，并安装使用 Kubernetes apt 仓库所需要的包：

  • sudo apt-get update

  • sudo apt-get install -y ca-certificates curl

  • 如果你使用 Debian 9（stretch）或更早版本，则你还需要安装 apt-transport-https：

  • sudo apt-get install -y apt-transport-https

  • 下载 Google Cloud 公开签名秘钥：

  • sudo curl -fsSLo /usr/share/keyrings/kubernetes-archive-keyring.gpg https://packages.cloud.google.com/apt/doc/apt-key.gpg

  • 添加 Kubernetes apt 仓库：

  • echo "deb [signed-by=/usr/share/keyrings/kubernetes-archive-keyring.gpg] https://apt.kubernetes.io/ kubernetes-xenial main" | sudo tee /etc/apt/sources.list.d/kubernetes.list

  • 更新 apt 包索引，使之包含新的仓库并安装 kubectl：

  • sudo apt-get update

  • sudo apt-get install -y kubectl

基于redhat发行版（rpm）

  • 官方（会超时）

  • cat <<EOF | sudo tee /etc/yum.repos.d/kubernetes.repo

  • [kubernetes]

  • name=Kubernetes

  • baseurl=https://packages.cloud.google.com/yum/repos/kubernetes-el7-$basearch

  • enabled=1

  • gpgcheck=1

  • gpgkey=https://packages.cloud.google.com/yum/doc/rpm-package-key.gpg

  • EOF

  • sudo yum install -y kubectl

  • 使用阿里云镜像安装

  • 前置步骤

    • 安装docker

    • 设置主机名称

      • 查看Linux内核版本

        • uname -r 或者使用 uname -a

      • 设置主机名称为k8s-master,重新连接显示生效

        • hostnamectl --static set-hostname k8s-master

      • 查看主机名称

        • hostname

    • 禁用SELinux

      • 永久禁用SELinux

        • vim /etc/sysconfig/selinux
        • SELINUX=disabled

      • 临时 禁用SELinux,让容器可以读取主机文件系统

        • setenforce 0

    • 关闭系统Swap

      • 关闭sawp分区 (可以不关闭,使用参数--ignore-preflight-errors=swap)
      • 临时关闭
        • swapoff -a
        • vi /etc/fstab
          • 注释掉swap分区
            • /dev/mapper/centos-swap swap

    • 配置docker国内镜像加速

      • 修改daemon.json 文件,没有就创建一个

      • 重新加载配置

        • systemctl daemon-reload

      • 重启docker

        • systemctl restart docker

  • 如果遇到此错误

用其他包管理工具安装

  • 如果你使用的 Ubuntu 或其他 Linux 发行版，内建支持 snap 包管理工具， 则可用 snap 命令安装 kubectl。

  • snap install kubectl --classic

  • kubectl version --client

  • 如果你使用 Linux 系统，并且装了 Homebrew 包管理工具， 则可以使用这种方式安装 kubectl。

  • brew install kubectl

  • kubectl version --client

  • 验证 kubectl 配置

    • 通过获取集群状态的方法，检查是否已恰当的配置了 kubectl：
      • kubectl cluster-info

  • kubectl 的可选配置和插件

    • 启用 shell 自动补全功能
      • kubectl 为 Bash、Zsh、Fish 和 PowerShell 提供自动补全功能，可以为你节省大量的输入。
      • bash
      • kubectl 的 Bash 补全脚本可以用命令 kubectl completion bash 生成。 在 Shell 中导入（Sourcing）补全脚本，将启用 kubectl 自动补全功能。
        • 补全脚本依赖于工具 bash-completion

          • 可以用命令 type _init_completion 检查 bash-completion 是否已安装

          • 安装 bash-completion

            • sudo apt-get install bash-completion
            • yum install bash-completion

          • 依据包管理工具的实际情况，你需要在 ~/.bashrc 文件中手工导入此文件

            • source /usr/share/bash-completion/bash_completion
      • fish
        • kubectl 通过命令 kubectl completion fish 生成 Fish 自动补全脚本。 在 shell 中导入（Sourcing）该自动补全脚本，将启动 kubectl 自动补全功能。
        • kubectl completion fish
        • 为了在所有的 shell 会话中实现此功能，请将下面内容加入到文件 ~/.config/fish/config.fish
          • kubectl completion fish | source
      • zsh
        • kubectl completion zsh
        • 为了在所有的 shell 会话中实现此功能，请将下面内容加入到文件 ~/.zshrc 中。
          • source <(kubectl completion zsh)
        • 如果你收到 2: command not found: compdef 这样的错误提示，那请将下面内容添加到 ~/.zshrc 文件的开头：
          • autoload -Uz compinit
          • compinit
    • 安装 kubectl convert 插件
      • 一个 Kubernetes 命令行工具 kubectl 的插件，允许你将清单在不同 API 版本间转换。 这对于将清单迁移到新的 Kubernetes 发行版上未被废弃的 API 版本时尤其有帮助
      • 用以下命令下载最新发行版：
      • 验证该可执行文件（可选步骤）
        • 下载 kubectl-convert 校验和文件：
        • 基于校验和，验证 kubectl-convert 的可执行文件：
          • echo "$(cat kubectl-convert.sha256) kubectl-convert" | sha256sum --check
      • 安装 kubectl-convert
        • sudo install -o root -g root -m 0755 kubectl-convert /usr/local/bin/kubectl-convert
      • 验证插件是否安装成功
        • kubectl convert --help

mac os上安装

windows上安装

kubeadm、kubelet 和 kubectl

  • 安装

    • ubuntu

      • apt-get install kubeadm kubectl kubelet

    • centos

      • yum -y install kubeadm kubectl kubelet

  • kubeadm：用来初始化集群的指令。

  • kubelet：在集群中的每个节点上用来启动 Pod 和容器等。

  • kubectl：用来与集群通信的命令行工具。

  • kubeadm 不能帮你安装或者管理 kubelet 或 kubectl， 所以你需要确保它们与通过 kubeadm 安装的控制平面的版本相匹配

  • kubelet 的版本不可以超过 API 服务器的版本

    • 1.7.0 版本的 kubelet 可以完全兼容 1.8.0 版本的 API 服务器，反之则不可以

解决kubeadm init报错

安装minikube

注意事项

  • wsl不支持systemctl命令，可以使用service命令代替

    • 例子
      • 执行sudo systemctl start docker报错
      • 使用sudo service docker start即可
      • 或者使用sudo /etc/init.d/docker start

  • wsl启动docker返回成功，但是服务未启动

Minikube

Minikube是一种轻量化的Kubernetes集群，是Kubernetes社区为了帮助开发者和学习者能够更好学习和体验k8s功能而推出的

使用 Minikube 和 Katacoda 在 Kubernetes 上运行一个应用示例

centos安装kubectl kubeadm kubelet

在ubuntu上安装minikube

解决kubelet 启动报错

解决kubeadm init报错

详细部署文档-这个文档最完整

删除启动时自动生成的大量ip

一、command操作命令

常用操作参数分类

二、pod相关常用命令

查看pod列表

  • $ kubectl get pod [-o wide] [-n NAMESPACE | -A]

    • -o wide ：查看pod运行在哪个节点上以及ip地址信息
    • -n NAMESPACE ：指定命名空间
    • --all-namespaces : 所有命名空间
    • --include-uninitialized : 包括未初始化的

查看指定pod的信息

  • $ kubectl get pod POD

显示pod节点的标签信息

  • $ kubectl get pod --show-labels

根据指定标签匹配到具体的pod

  • $ kubectl get pod -l app=example（标签键值对）

查看某pod的描述

  • $ kubectl describe pod POD [-n NAMESPACE]

输出一个单容器pod POD的日志到标准输出

  • $ kubectl logs podName

持续输出一个单容器pod POD的日志到标准输出

  • $ kubectl logs -f podName

持续输出一个单容器pod POD的日志到标准输出，从最新100行开始

  • $ kubectl logs -f -n namespace --tail 100 podName

指定时间段输出日志

  • $ kubectl logs podName --since=1h

指定时间戳输出日志

  • $ kubectl logs podName --since-time=2018-11-01T15:00:00Z

查看运行pod的环境变量

  • $ kubectl exec podName env

扩容

  • $ kubectl scale deployment DEPLOYMENT --replicas=8

logs #查询POD的logs日志信息

  • kubectl logs nginx-86546d6646-fdcd9

cp #拷贝文件到POD或者从POD拷贝文件到本地

  • 拷贝文件到pod容器

    • kubectl cp index.html nginx-86546d6646-h7m2l:/usr/share/nginx/html/

  • 从POD的容器里拷出来

    • kubectl cp nginx-86546d6646-h7m2l:/usr/share/nginx/html/ index.html

  • 注：

    • 有些POD无法使用CP，可能是没有安装tar,须要进入容器，设置YUM源，安装后，可以使用。

attach #实时监控相关POD数据，相当于tail -F

  • 实时查看

    • kubectl attach nginx-86546d6646-fdcd9

三、基础命令

create/apply：创建资源

  • 格式：

    • $ kubectl create -f xxx.yaml # 不建议使用，无法更新，必须先delete

  • 创建Deployment和Service资源

    • $ kubectl create -f demo-deployment.yaml
    • $ kubectl create -f demo-service.yaml

  • 创建+更新，可以重复使用

    • $ kubectl apply -f xxx.yaml

  • 应用资源，该目录下的所有 .yaml, .yml, 或 .json 文件都会被使用

    • $ kubectl apply -f

  • 创建命名空间

    • $ kubectl create namespace test-demo

get：获得资源信息

  • 查看默认命名空间中所有的资源信息（pod、service、deployment、replicaset）

    • $ kubectl get all [-A | -n {命名空间名称}]

  • 查看指定命令空间下面的pod/svc/deployment

    • $ kubectl get pod/svc/deployment [-o wide] -n NAMESPACE

      • -o wide：选项可以查看存在哪个对应的节点

  • 查看所有namespace下面的pod/svc/deployment

    • $ kubectl get pod/svc/deployment --all-namespaces
    • $ kubectl get pod/svc/deployment -A

  • 查看node节点列表

    • $ kubectl get node

  • 显示node节点的标签信息

    • $ kubectl get node --show-labels

  • 查看服务的详细信息，显示了服务名称，类型，集群ip，端口，时间等信息

    • $ kubectl get service # 查看默认命名空间的服务
    • $ kubectl get svc
    • $ kubectl get svc [-A | -n {命名空间名称}]

  • 查看命名空间

    • $ kubectl get namespaces
    • $ kubectl get ns

  • 查看目前所有的replica set，显示了所有的pod的副本数，以及他们的可用数量以及状态等信息

    • $ kubectl get rs

  • 查看已经部署了的所有应用，可以看到容器，以及容器所用的镜像，标签等信息

    • $ kubectl get deployments
    • $ kubectl get deploy [-o wide]

delete：删除资源

  • 根据yaml文件删除对应的资源，但是yaml文件并不会被删除，这样更加高效

    • $ kubectl delete -f demo-deployment.yaml
    • $ kubectl delete -f demo-service.yaml

  • 根据deployment资源来进行删除，会同时删除deployment、pod和service资源

    • $ kubectl delete deployment DEPLOYMENT [-n NAMESPACE]

  • 根据label删除

    • $ kubectl delete pod -l app=APP [-n NAMESPACE]

      • -l app=APP ：使用标签（label），且标签内容为”app=APP“

  • 强制立即删除某pod。注：无法删除对应的应用，因为存在deployment/rc之类的副本控制器，删除pod也会重新拉起来

    • $ kubectl delete pod POD --grace-period=0 --force [-n NAMESPACE]

      • --force ：强制
      • --grace-period=0 ：延迟0秒。缺省未设定的情况下会等待30s

    • $ kubectl delete pod podName --now [-n NAMESPACE]

  • 删除所有pod

    • $ kubectl delete pods --all

run：创建并运行容器

  • 在集群中创建并运行一个或多个容器

    • run NAME --image=image [--env="key=value"] [--port=port] [--replicas=replicas] [--dry-run=bool] [--overrides=inline-json] [--command] -- [COMMAND] [args...]

  • 示例：运行一个名称为nginx，副本数为3，标签为app=example，镜像为nginx:1.10，端口为80的容器实例

    • $ kubectl run nginx --replicas=3 --labels="app=example" --image=nginx:1.10 --port=80

  • 示例：运行一个名称为nginx，副本数为3，标签为app=example，镜像为nginx:1.10，端口为80的容器实例，并绑定到k8s-node1上

    • $ kubectl run nginx --image=nginx:1.10 --replicas=3 --labels="app=example" --port=80 --overrides='{"apiVersion":"apps/v1","spec":{"template":{"spec":{"nodeSelector":{"kubernetes.io/hostname":"k8s-node1"}}}}}'

expose：创建service服务

  • 创建一个service服务，并且暴露端口让外部可以访问

  • 指定deployment、service、replica set、replication controller或pod，并使用该资源的选择器作为指定端口上新服务的选择器。deployment 或 replica set只有当其选择器可转换为service支持的选择器时，即当选择器仅包含matchLabels组件时才会作为暴露新的Service。

  • 资源包括(不区分大小写)：

    • pod（po），service（svc），replication controller（rc），deployment（deploy），replica set（rs）

  • 语法

    • kubectl expose (-f FILENAME | TYPE NAME) [--port=port] [--protocol=TCP|UDP] [--target-port=number-or-name] [--name=name] [--external-ip=external-ip-of-service] [--type=type]

  • 示例：创建一个nginx服务并且暴露端口让外界可以访问

    • $ kubectl expose deployment nginx --port=88 --type=NodePort --target-port=80 --name=nginx-service

      • --port ：本地端口
      • --target-port ：容器端口

  • 为RC的nginx创建service，并通过Service的80端口转发至容器的8000端口上

    • kubectl expose rc nginx --port=80 --target-port=8000

  • 由“nginx-controller.yaml”中指定的type和name标识的RC创建Service，并通过Service的80端口转发至容器的8000端口上

    • kubectl expose -f nginx-controller.yaml --port=80 --target-port=8000

set：修改应用的资源

  • 配置应用的一些特定资源，也可以修改应用已有的资源

  • 使用 kubectl set --help查看，它的子命令，env，image，resources，selector，serviceaccount，subject。

  • 语法：

    • resources (-f FILENAME | TYPE NAME) ([--limits=LIMITS & --requests=REQUESTS]

  • set resources

    • kubectl set resources 命令：这个命令用于设置资源的一些范围限制。

    • 资源对象中的Pod可以指定计算资源需求（CPU-单位m、内存-单位Mi），即使用的最小资源请求（Requests），限制（Limits）的最大资源需求，Pod将保证使用在设置的资源数量范围。

    • 可用资源对象包括(支持大小写)：replicationcontroller、deployment、daemonset、job、replicaset。

    • 将deployment的nginx容器cpu限制为“200m”，将内存设置为“512Mi”

      • $ kubectl set resources deployment nginx -c=nginx --limits=cpu=200m,memory=512Mi

    • 设置所有nginx容器中 Requests和Limits

      • $ kubectl set resources deployment nginx --limits=cpu=200m,memory=512Mi --requests=cpu=100m,memory=256Mi

    • 删除nginx中容器的计算资源值

      • $ kubectl set resources deployment nginx --limits=cpu=0,memory=0 --requests=cpu=0,memory=0

  • set selector

    • kubectl set selector 命令

      • 设置资源的 selector（选择器）。如果在调用"set selector"命令之前已经存在选择器，则新创建的选择器将覆盖原来的选择器。

    • 要求

      • 必须以字母或数字开头，最多包含63个字符
      • 可使用：字母、数字、连字符" - " 、点".“和下划线” _ "。
      • 如果指定了–resource-version，则更新将使用此资源版本，否则将使用现有的资源版本。

    • 注意：

      • 目前 selector 命令只能用于 Service 对象。

    • 语法：

      • selector (-f FILENAME | TYPE NAME) EXPRESSIONS [--resource-version=version]

  • set image

    • kubectl set image 命令：用于更新现有资源的容器镜像。

    • 可用资源对象包括：

      • pod (po)
      • replicationcontroller (rc)
      • deployment (deploy)
      • daemonset (ds)
      • job
      • replicaset (rs)

    • 语法：

      • image (-f FILENAME | TYPE NAME) CONTAINER_NAME_1=CONTAINER_IMAGE_1 ... CONTAINER_NAME_N=CONTAINER_IMAGE_N

      • 将deployment中的nginx容器镜像设置为“nginx：1.9.1”

        • $ kubectl set image deployment/nginx busybox=busybox nginx=nginx:1.9.1

      • 所有deployment和rc的nginx容器镜像更新为“nginx：1.9.1”

        • $ kubectl set image deployments,rc nginx=nginx:1.9.1 --all

      • 将daemonset abc的所有容器镜像更新为“nginx：1.9.1”

        • $ kubectl set image daemonset abc *=nginx:1.9.1

      • 从本地文件中更新nginx容器镜像

        • $ kubectl set image -f path/to/file.yaml nginx=nginx:1.9.1 --local -o yaml

explain：显示资源文档信息

  • $ kubectl explain rs

edit：编辑资源信息

  • 编辑Deployment nginx的一些信息

    • $ kubectl edit deployment nginx

  • 编辑service类型的nginx的一些信息

    • $ kubectl edit service/nginx

设置命令

  • label：更新资源上的标签

    • 用于更新（增加、修改或删除）资源上的 label（标签）

      • label 必须以字母或数字开头，可以使用字母、数字、连字符、点和下划线，最长63个字符。
      • 如果 --overwrite 为 true，则可以覆盖已有的label，否则尝试覆盖label将会报错。
      • 如果指定了–resource-version，则更新将使用此资源版本，否则将使用现有的资源版本。

    • 语法：

      • label [--overwrite] (-f FILENAME | TYPE NAME) KEY_1=VAL_1 ... KEY_N=VAL_N [--resource-version=version]

      • 给名为foo的Pod添加label unhealthy=true

        • $ kubectl label pods POD名称 unhealthy=true

      • 给名为foo的Pod修改label 为 'status' / value 'unhealthy'，且覆盖现有的value

        • $ kubectl label pods POD名称 status=unhealthy --overwrite

      • 给 namespace 中的所有 pod 添加 label

        • $ kubectl label pods --all status=unhealthy

      • 仅当resource-version=1时才更新 名为foo的Pod上的label

        • $ kubectl label pods POD名称 status=unhealthy --resource-version=1

      • 删除名为“bar”的label 。（使用“ - ”减号相连）

        • $ kubectl label node NODE名称 bar-

  • annotate：更新注解信息

    • 更新一个或多个资源的Annotations信息。也就是注解信息，可以方便的查看做了哪些操作。

      • Annotations由key/value组成。
      • Annotations的目的是存储辅助数据，特别是通过工具和系统扩展操作的数据。
      • 如果–overwrite为true，现有的annotations可以被覆盖，否则试图覆盖annotations将会报错。
      • 如果设置了–resource-version，则更新将使用此resource version，否则将使用原有的resource version

    • 语法：

      • annotate [--overwrite] (-f FILENAME | TYPE NAME) KEY_1=VAL_1 ... KEY_N=VAL_N [--resource-version=version]

    • 更新Pod“foo”，设置annotation “description”的value “my frontend”，如果同一个annotation多次设置，则只使用最后设置的value值

      • $ kubectl annotate pods foo description='my frontend'

    • 更新Pod"foo"，设置annotation“description”的value“my frontend running nginx”，覆盖现有的值

      • $ kubectl annotate --overwrite pods foo description='my frontend running nginx'

    • 根据“pod.json”中的type和name更新pod的annotation

      • $ kubectl annotate -f pod.json description='my frontend'

    • 更新 namespace中的所有pod

      • $ kubectl annotate pods --all description='my frontend running nginx'

    • 只有当resource-version为1时，才更新pod 'foo'

      • $ kubectl annotate pods foo description='my frontend running nginx' --resource-version=1

    • 通过删除名为“description”的annotations来更新pod 'foo'。

      • 不需要 -overwrite flag。
      • $ kubectl annotate pods foo description-

部署命令

  • rollout：管理资源

    • 用于对资源进行管理

    • 可用资源包括：deployments，daemonsets。

    • 子命令：

      • history（查看历史版本）
      • pause（暂停资源）
      • resume（恢复暂停资源）
      • status（查看资源状态）
      • undo（回滚版本）

    • 语法

      • kubectl rollout SUBCOMMAND

      • 回滚到之前的deployment

        • $ kubectl rollout undo deployment DEPLOYMENT

      • 查看daemonet的状态

        • $ kubectl rollout status daemonset NAME

      • 查看历史版本

        • $ kubectl rollout history deployment DEPLOYMENT

  • rolling-update：滚动更新资源

    • 执行指定ReplicationController的滚动更新。

    • 该命令创建了一个新的RC， 然后一次更新一个pod方式逐步使用新的PodTemplate，最终实现Pod滚动更新，new-controller.json需要与之前RC在相同的namespace下。

    • 语法：

      • rolling-update OLD_CONTROLLER_NAME ([NEW_CONTROLLER_NAME] --image=NEW_CONTAINER_IMAGE | -f NEW_CONTROLLER_SPEC)

    • 使用frontend-v2.json中的新RC数据更新frontend-v1的pod

      • $ kubectl rolling-update frontend-v1 -f frontend-v2.json

    • 使用JSON数据更新frontend-v1的pod

      • $ cat frontend-v2.json | kubectl rolling-update frontend-v1 -f -

    • 基于 stdin 输入的 JSON 替换 pod

      • $ cat pod.json | kubectl replace -f -

    • 更新frontend资源的镜像

      • $ kubectl rolling-update frontend --image=image:v2

    • 更新frontend-v1资源名称为frontend-v2并更新镜像

      • $ kubectl rolling-update frontend-v1 frontend-v2 --image=image:v2

    • 退出已存在的进行中的滚动更新

      • $ kubectl rolling-update frontend-v1 frontend-v2 --rollback

  • scale：扩容或缩容（pod数）

    • 扩容或缩容 Deployment、ReplicaSet、Replication Controller或 Job 中Pod数量

    • scale也可以指定多个前提条件，如：当前副本数量或 --resource-version ，进行伸缩比例设置前，系统会先验证前提条件是否成立。这个就是弹性伸缩策略。

    • 语法：

      • kubectl scale [--resource-version=version] [--current-replicas=count] --replicas=COUNT (-f FILENAME | TYPE NAME)

    • 将名为foo中的pod副本数设置为3。

      • $ kubectl scale --replicas=3 rs/foo

      • 输出

        • kubectl scale deploy/nginx --replicas=30

    • 将由“foo.yaml”配置文件中指定的资源对象和名称标识的Pod资源副本设为3

      • $ kubectl scale --replicas=3 -f foo.yaml

    • 如果当前副本数为2，则将其扩展至3。

      • $ kubectl scale --current-replicas=2 --replicas=3 deployment/mysql

    • 设置多个RC中Pod副本数量

      • $ kubectl scale --replicas=5 rc/foo rc/bar rc/baz

  • autoscale：自动扩容或缩容

    • 这个比scale更加强大，也是弹性伸缩策略 ，它是根据流量的多少来自动进行扩展或者缩容。

    • 指定Deployment、ReplicaSet或ReplicationController，并创建已经定义好资源的自动伸缩器。使用自动伸缩器可以根据需要自动增加或减少系统中部署的pod数量。

    • 语法：

      • kubectl autoscale (-f FILENAME | TYPE NAME | TYPE/NAME) [--min=MINPODS] --max=MAXPODS [--cpu-percent=CPU] [flags]

    • 使用 Deployment “foo”设定，使用默认的自动伸缩策略，指定目标CPU使用率，使其Pod数量在2到10之间

      • $ kubectl autoscale deployment foo --min=2 --max=10

    • 使用RC“foo”设定，使其Pod的数量介于1和5之间，CPU使用率维持在80％

      • $ kubectl autoscale rc foo --max=5 --cpu-percent=80

  • 集群管理命令：certificate，cluster-info，top，cordon，uncordon，drain，taint

    • certificate命令：用于证书资源管理，授权等

      • 当有node节点要向master请求，那么是需要master节点授权的
      • $ kubectl certificate approve node-csr-81F5uBehyEyLWco5qavBsxc1GzFcZk3aFM3XW5rT3mw node-csr-Ed0kbFhc_q7qx14H3QpqLIUs0uKo036O2SnFpIheM18

    • 查看集群信息

      • $ kubectl cluster-info

    • 将当前集群状态输出到 stdout

      • $ kubectl cluster-info dump

    • 将当前集群状态输出到 /path/to/cluster-state

      • $ kubectl cluster-info dump --output-directory=/path/to/cluster-state

    • 检测核心组件状态【如果你的集群运行不正常，这是一个很好的、进行第一次诊断检查的机会】

      • $ kubectl get componentstatuses
      • $ kubectl get cs

    • 查看node/pod的资源使用情况。需要heapster 或metrics-server支持

      • $ kubectl top node/pod -A

    • 查看日志:

      • $ journalctl -u kubelet -f

    • 设为不可调度状态：

      • $ kubectl cordon node1

    • 解除不可调度状态

      • $ kubectl uncordon node1

    • 将pod从NODE-1节点赶到其他节点：

      • $ kubectl drain NODE-1

    • taint命令：用于给某个Node节点设置污点

      • master运行pod
      • $ kubectl taint nodes master.k8s node-role.kubernetes.io/master-

    • master不运行pod

      • $ kubectl taint nodes master.k8s node-role.kubernetes.io/master=:NoSchedule

    • 查看kubelet进程启动参数

      • $ ps -ef | grep kubelet

集群故障排查和调试命令

  • describe：显示特定资源的详细信息

    • 查看my-nginx pod的详细状态

      • $ kubectl describe po my-nginx

  • logs：打印日志

    • logs命令：用于在一个pod中打印一个容器的日志，如果pod中只有一个容器，可以省略容器名

    • 语法

      • $ kubectl logs [-f] [-p] POD [-c CONTAINER]

    • 参数选项：

      • -c, --container=“”：容器名。
      • -f, --follow[=false]：指定是否持续输出日志（实时日志）。
      • –interactive[=true]：如果为true，当需要时提示用户进行输入。默认为true。
      • –limit-bytes=0：输出日志的最大字节数。默认无限制。
      • -p, --previous[=false]：如果为true，输出pod中曾经运行过，但目前已终止的容器的日志。
      • –since=0：仅返回相对时间范围，如5s、2m或3h，之内的日志。默认返回所有日志。只能同时使用since和since-time中的一种。
      • –since-time=“”：仅返回指定时间（RFC3339格式）之后的日志。默认返回所有日志。只能同时使用since和since-time中的一种。
      • –tail=-1：要显示的最新的日志条数。默认为-1，显示所有的日志。
      • –timestamps[=false]：在日志中包含时间戳。
      • ————————————————
      • 版权声明：本文为CSDN博主「墨鸦_Cormorant」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。
      • 原文链接：https://blog.csdn.net/footless_bird/article/details/125798691

    • 返回仅包含一个容器的pod nginx的日志快照

      • $ kubectl logs nginx

    • 持续输出pod MyPod中的日志

      • $ kubectl logs -f MyPod

    • 持续输出pod MyPod中的容器web-1的日志

      • $ kubectl logs -f MyPod -c web-1

    • 仅输出pod nginx中最近的20条日志

      • $ kubectl logs --tail=20 nginx

    • 输出pod nginx中最近一小时内产生的所有日志

      • $ kubectl logs --since=1h nginx

    • 指定时间戳输出日志

      • $ kubectl logs MyPod --since-time=2018-11-01T15:00:00Z

    • 返回pod MyPod中已经停止的容器web-1的日志快照

      • $ kubectl logs -p MyPod -c web-1

  • exec：进入容器进行交互

    • exec命令：进入容器进行交互，在容器中执行命令

    • 语法

      • kubectl exec POD [-c CONTAINER] -- COMMAND [args...]

    • 参数

      • -c, --container="" 容器名。如果省略，则默认选择第一个 pod。
      • -p, --pod="" Pod名。
      • -i, --stdin[=false] 将控制台输入发送到容器。
      • -t, --tty[=false] 将标准输入控制台作为容器的控制台输入。

    • 在pod 123456-7890的容器ruby-container中运行“date”并获取输出

      • kubectl exec 123456-7890 -c ruby-container date

    • 默认在pod 123456-7890的第一个容器中运行“date”并获取输出

      • kubectl exec 123456-7890 -- date

    • 切换到终端模式，将控制台输入发送到pod 123456-7890的ruby-container的“bash”命令，并将其输出到控制台/

      • 错误控制台的信息发送回客户端。

        • kubectl exec 123456-7890 -c ruby-container -it -- bash -il

  • attach：连接到一个正在运行的容器

    • kubectl attach POD [-c CONTAINER]

    • 参数选项：

      • -c, --container=“”: 容器名。如果省略，则默认选择第一个 pod。

      • -i, --stdin[=false]: 将控制台输入发送到容器。

      • -t, --tty[=false]: 将标准输入控制台作为容器的控制台输入。

      • 获取正在运行中的pod 123456-7890的输出，默认连接到第一个容器

        • $ kubectl attach 123456-7890

      • 获取pod 123456-7890中ruby-container的输出

        • $ kubectl attach 123456-7890 -c ruby-container

      • 切换到终端模式，将控制台输入发送到pod 123456-7890的ruby-container的“bash”命令，并将其输出到控制台

        • $ kubectl attach 123456-7890 -c ruby-container -i -t

  • 其他命令：api-servions，config，help，plugin，version

    • api-servions命令：打印受支持的api版本信息

      • 打印当前集群支持的api版本

        • $ kubectl api-versions

    • help命令：用于查看命令帮助

      • 显示全部的命令帮助提示

        • $ kubectl --help

      • 具体的子命令帮助，例如

        • $ kubectl create --help

    • config 命令：用于修改kubeconfig配置文件（用于访问api，例如配置认证信息）

      • 设置 kubectl 与哪个 Kubernetes 集群进行通信并修改配置信息。查看 使用 kubeconfig 跨集群授权访问 文档获取详情配置文件信息。

      • 示例

        • 显示合并的 kubeconfig 配置

          • $ kubectl config view

        • 查看配置的摘要（上下文、命名空间）

          • $ kubectl config get-contexts

        • 同时使用多个 kubeconfig 文件并查看合并的配置

          • $ KUBECONFIG=/.kube/config:/.kube/kubconfig2 kubectl config view

        • 获取 e2e 用户的密码

          • $ kubectl config view -o jsonpath='{.users[?(@.name == "e2e")].user.password}'

        • 查看当前使用的上下文

          • $ kubectl config current-context

        • 设置默认的上下文

          • $ kubectl config use-context 上下文名称

        • 使用特定的用户名和命名空间新增一个上下文，并设置为默认的上下文。

          • $ kubectl config set-context 上下文名称 \
          • --user=cluster-admin \
          • --namespace=NAMESPACE \
          • && kubectl config use-context 上下文名称

        • 更改当前上下文的命名空间

          • $ kubectl config set-context --current --namespace=NAMESPACE
          • $ kubectl config set-context $(kubectl config current-context) --namespace=NAMESPACE

        • 恢复到默认命名空间

          • $ kubectl config set-context
          • $(kubectl config current-context) --namespace=

        • 删除指定的上下文

          • $ kubectl config delete-context CLUSTER

        • 添加新的集群配置到 kubeconf 中，使用 basic auth 进行鉴权

          • $ kubectl config set-credentials kubeuser/foo.kubernetes.com --username=kubeuser --password=kubepassword

    • version 命令：打印客户端和服务端版本信息

      • 打印客户端和服务端版本信息

        • $ kubectl version

    • plugin 命令：运行一个命令行插件

高级命令：apply，patch，replace，convert

  • apply命令：通过文件名或者标准输入对资源应用配置

    • 通过文件名或控制台输入，对资源进行配置。 如果资源不存在，将会新建一个。可以使用 JSON 或者 YAML 格式。

    • 语法

      • kubectl apply -f FILENAME

    • 参数选项：

      • -f, --filename=[]：包含配置信息的文件名，目录名或者URL。
      • –include-extended-apis[=true]：如果为true，则通过调用API服务器来包含新API的定义。默认为true
      • -o, --output=“”：输出模式。"-o name"为快捷输出(资源/name).
      • –record[=false]：在资源注释中记录当前 kubectl 命令。
      • -R, --recursive[=false]：递归处理 -f, --filename 中使用的目录。当您希望管理组织在同一目录中的相关清单时很有用。
      • –schema-cache-dir=“~/.kube/schema”：非空则将API schema缓存为指定文件，默认缓存到’$HOME/.kube/schema’
      • –validate[=true]：如果为true，在发送到服务端前先使用schema来验证输入。

    • 将pod.yaml中的配置应用到pod

      • $ kubectl apply -f ./pod.yaml

    • 将控制台输入的Yaml配置应用到Pod

      • $ cat pod.yaml | kubectl apply -f -

  • patch命令：使用补丁修改，更新资源的字段，也就是修改资源的部分内容

    • 语法：

      • kubectl patch (-f FILENAME | TYPE NAME) -p PATCH

    • 使用策略合并补丁部分更新节点

      • $ kubectl patch node k8s-node-1 -p '{"spec":{"unschedulable":true}}'

    • 更新一个容器的镜像;Spec.containers.name是必需的，因为它是一个合并键

      • $ kubectl patch pod valid-pod -p '{"spec":{"containers":[{"name":"kubernetes-serve-hostname","image":"new image"}]}}'

  • replace命令： 通过文件或者标准输入替换原有资源

    • 语法：

      • kubectl replace -f FILENAME

    • 使用pod.yaml中的数据替换一个pod

      • $ kubectl replace -f ./pod.yaml

    • 根据传递到标准输入的YAML替换一个pod。

      • $ cat pod.yaml | kubectl replace -f -

    • 将单容器pod的镜像的版本(标记)更新为v4

      • $ kubectl get pod mypod -o yaml | sed 's/(image: myimage):.*$/\1:v4/' | kubectl replace -f -

    • 强制替换、删除然后重新创建资源

      • $ kubectl replace --force -f ./pod.yaml

  • convert命令：转换配置文件为不同的API版本，支持YAML和JSON格式。

    • 该命令将配置文件名，目录或URL作为输入，并将其转换为指定的版本格式，如果目标版本未指定或不支持，则转换为最新版本。

    • 默认输出将以YAML格式打印出来，可以使用- o选项改变输出格式。

    • 语法：

      • kubectl convert -f FILENAME

    • 将文件'pod.yaml'转换为最近版本并打印到标准输出

      • $ kubectl convert -f pod.yaml

    • 将“pod.yaml”指定的资源的实时状态转换为最新版本，并以json格式打印到标准输出

      • $ kubectl convert -f pod.yaml --local -o yaml

    • 将当前目录下的所有文件转换为最新版本，并将其全部创建

      • $ kubectl convert -f . | kubectl create -f -

输出选项

  • 格式化输出

    • 所有kubectl命令的默认输出格式是人类可读的纯文本格式。

      • 要将详细信息以特定的格式输出到终端窗口，可以将 -o 或 --output标识添加到受支持的kubectl命令中。
      • kubectl [command] [TYPE] [NAME] -o <output_format>

  • 导出配置文件

    • 导出proxy的配置为yaml文件

      • kubectl get ds -n kube-system -l k8s-app=kube-proxy -o yaml > kube-proxy-ds.yaml

    • 导出kube-dns的deployment和services的配置为yaml文件

      • kubectl get deployment -n kube-system -l k8s-app=kube-dns -o yaml > kube-dns-dp.yaml
      • kubectl get services -n kube-system -l k8s-app=kube-dns -o yaml > kube-dns-services.yaml

    • 导出所有 configmap

      • kubectl get configmap -n kube-system -o wide -o yaml > configmap.yaml

四、实战

运行应用

给应用注入数据

监控、日志、调试

配置pods和容器

访问集群中的应用程序

扩展 Kubernetes

五、实用技巧

1.更方便的更新pod配置

  • 查看、编辑某个pod的配置

    • kubectl -n ns get cm pod-config -o yaml
    • kubectl -n ns edit cm pod-config
    • 输出的内容格式为configMap（因为压缩了内容所以更利于网络传输，但是可读性就）：

  • 补充

    • 使用jsonpath输出配置内容为文本的配置：kubectl -n app get cm config-map-name -n app -o jsonpath='{$.data.config.yaml}'
      原配置（就是一堆文本，看着头疼）：

    使用jsonpath输出的配置内容（可以愉快的复制粘贴了，更方便修改）：

    • 现在你需要修改这个配置，比如加几个key，你可能会怒砸屏幕键盘，那么如何更优雅的修改配置呢

      • 开局一张图，剩下的就全靠编了

      • 完整的操作

        • 1.打开后端服务找到config.yaml文件，当然也可能是其他名字

        • 2.修改内容变成你需要的样子，然后使用cv大法

        • 3.在服务端上新建一个yaml文件

        • 4.编写yaml内容

          • 注意事项：后端服务里面的confi.yaml拷贝出来的内容不一定完整，不完整的内容需要自己手动冲突

          • 这里着重介绍一个|-符号：

            • 1.使用“|-”处理多行文本，详细解释：

              • 在 YAML 文件中，符号 |- 是一个折叠标记（Folded Block Style），它用于指示如何处理多行字符串。使用该标记时，会忽略所有换行符，并将文本块中的所有行连接成一个单独的字符串。

              • 例如，以下 YAML 代码段中：

                • description: |
                  This is a long
                  description that spans
                  multiple lines.

                • 使用 |- 标记后，字符串将被折叠为：

                  • This is a long description that spans multiple lines.

                • 请注意，在使用 |- 标记时，每一行末尾的空格都将被保留。如果您不希望保留这些空格，则可以使用 |+ 标记，它表示保留所有空格，包括行末尾的空格

            • 2.缩进的时候不要使用\t,改用空格代替

          • 例如：我现在这个项目：后端服务的config.yaml其实只是k8s的一个key的内容，data.yaml

            • 剩余的内容找到你要你要修改的pod获取到
            • kubectl -n ns get cm pod-config -o yaml

          • 一个完整的k8s配置文件（来自chatgpt的回答）：

- apiVersion: v1
kind: Pod
metadata:
  name: example-pod
spec:
  containers:
  - name: example-container
    image: nginx
    ports:
    - containerPort: 80
    volumeMounts:
    - name: data-volume
      mountPath: /usr/share/nginx/html
  volumes:
  - name: data-volume
    configMap:
      name: example-configmap
  • 这个配置文件定义了一个名为 example-pod 的 Pod。它包含一个名为 example-container 的容器，使用 nginx 镜像，并在容器内部暴露了 80 端口。此外，该容器还挂载了一个名为 data-volume 的卷到 /usr/share/nginx/html 目录下。
  • 在这个配置文件中，我们使用了一个 ConfigMap 来定义卷的内容，如下所示：
apiVersion: v1
kind: ConfigMap
metadata:
  name: example-configmap
data:
  index.html: "<html><body><h1>Hello, Kubernetes!</h1></body></html>"
  • 这个 ConfigMap 定义了一个名为 example-configmap 的 ConfigMap，其中包含了一个名为 index.html 的键值对，值为 <html><body><h1>Hello, Kubernetes!</h1></body></html>，可以被挂载到 Pod 中作为卷使用。
  • 5.让pod应用修改后的配置
    • kubectl -n ns apply -f config_target.yaml
  • 6.重启pod
    • kubectl -n ns delete pod pod_name
  • 7.查询pod status是否正常
    • kubectl -n ns get pod pod_name
  • 8.查询pod config是否是更新后的配置
    • kubectl -n ns get cm pod_config_map -o yaml
      -9 错误处理
      for: "user-cm.yaml": Operation cannot be fulfilled on configmaps "user-service-config": the object has been modified; please apply your changes to the latest version and try again
      chatgpt的回复：这个错误是由于在你最后一次检索 ConfigMap 对象之后，另一个进程修改了这个对象，导致你的更新操作无法完成。
      要解决这个问题，你需要从 Kubernetes API 服务器更新本地的 ConfigMap 副本，然后再进行修改并将其应用到服务器上。
      说白了就是metadata里面的内容不是最新的，需要获取最新的内容并添加的自定义的配置文件中，然后在apply&重启即可

2.配合xargs命令更方便的操作pod

  • 首先来个套娃命令

    • kubectl -n app get pod|grep portal|grep -v grep|awk '{print $1}'|xargs kubectl -n app get pod

  • xargs介绍（来自chatgpt回答）

    • 在Linux中，xargs命令是一个非常有用的命令。它可以将一个命令的输出作为另一个命令的参数，并将其传递给该命令。这对于处理大量文件或目录等对象时非常有用。
    • 下面是一些xargs命令的例子：
      • 将文件名作为参数传递给另一个命令
        • ls | xargs rm
        • 这个命令将所有文件名作为参数传递给rm命令，从而删除当前目录下的所有文件。
      • 将多个参数组合成一条命令
        • echo "hello world" | xargs echo
        • 这个命令将echo "hello world"作为参数传递给echo命令，从而输出hello world。
      • 限制参数数量
        • ls | xargs -n 1 rm
        • 这个命令将每个文件名作为单独的参数传递给rm命令，从而逐个删除当前目录下的所有文件。
      • 从文件中读取参数
        • cat file.txt | xargs -n 1 echo
        • 这个命令将file.txt文件中的每行文本作为单独的参数传递给echo命令，从而逐行输出文件中的内容。
    • 总之，xargs命令可以使我们更加高效地处理命令行中的参数，特别是在处理大量文件或目录时非常有用。

  • 顺带介绍linux三剑客

    • Linux三剑客指的是grep、sed和awk，它们都是常用的文本处理工具。

    • grep（全称Global Regular Expression Print）：是一个用于在文件中搜索给定文本模式的命令行工具。grep可以查找文件内容中符合特定条件的行，并将它们输出到控制台或者其他文件中。例如，我们可以使用grep 'apple' file.txt来查找file.txt中包含“apple”的行。

      • grep是一个非常有用的命令行工具，它可以用来查找文本文件中的匹配项。除了最基本的用法（例如在文件中查找单词或短语），grep还有一些高级用法，可以让您更加准确地查找所需的内容。

      • 以下是一些grep的高级用法：

        • 使用正则表达式：grep支持使用正则表达式进行模式匹配。这意味着您可以使用各种通配符和元字符来更精确地定义您要查找的内容。

          • 例如，如果您要查找所有以大写字母开头的单词，可以使用以下命令：
          • grep '<[A-Z][a-z]*>' filename.txt

        • 查找多个模式：grep允许你同时查找多个模式。例如，如果您要查找包含单词“apple”或“orange”的行，可以使用以下命令：

          • grep -E 'apple|orange' filename.txt

        • 搜索多个文件：grep可以搜索多个文件并将匹配的行打印出来。例如，如果您要在目录下的所有.txt文件中查找单词“banana”，可以使用以下命令：

          • grep 'banana' *.txt

        • 反向搜索：默认情况下，grep只显示匹配的行。但是，您也可以使用-v选项来反向搜索，即显示不匹配的行。

          • 例如，如果您要查找所有不包含单词“pear”的行，可以使用以下命令：
          • grep -v 'pear' filename.txt

      • 这些是grep的一些高级用法。它们可以大大提高您在文本文件中查找内容的效率和准确性。

    • sed（全称Stream Editor）：是一个非交互式的流编辑器。sed可以对文本进行一系列操作，如替换、删除、插入等等。它通过读取输入流并对其进行处理，然后将结果输出到标准输出或指定文件中。例如，我们可以使用sed 's/apple/orange/' file.txt来将file.txt中所有的“apple”替换为“orange”。

      • sed（Stream Editor）是一个非交互式的流编辑器，它可以对文本进行一系列的操作。主要应用场景如下：
        替换字符串：使用s命令替换文件中指定字符串。例如，我们可以使用sed 's/old/new/' file.txt来将file.txt中所有的“old”替换为“new”。
        删除行：使用d命令删除文件中匹配特定模式的行。例如，我们可以使用sed '/pattern/d' file.txt来删除file.txt中所有匹配模式“pattern”的行。
        插入、追加和修改行：使用i、a和c命令在文件的指定位置插入或修改行。例如，我们可以使用sed '3i new line' file.txt来在file.txt的第三行前插入新行。
        处理特定行范围：使用数字或模式匹配限制sed的处理范围。例如，我们可以使用sed '2,4d' file.txt来删除file.txt中第二行到第四行的内容。
        格式化输出：使用p命令打印文件中指定行的内容。例如，我们可以使用sed -n '2,4p' file.txt来打印file.txt中第二行到第四行的内容。
        总之，sed可以对文本进行各种复杂的操作，包括搜索、替换、删除、插入、追加、格式化等，非常适用于批量处理文本文件的场景。同时，它也是一种强大的文本编程工具，支持变量、条件语句、循环等高级特性，可以完成复杂的文本转换和处理任务。

    • awk：是一种强大的文本处理语言，它可以完成比grep和sed更复杂的文本操作。awk支持多种内置函数、逻辑判断、循环等高级编程功能。与grep和sed不同，awk可以将数据分解成字段，并按照需要对每个字段进行操作。例如，我们可以使用awk '{print $3}' file.txt来输出file.txt中每行的第三个字段。

      • awk是一种文本处理工具，可以用来对结构化文本进行过滤、操作和格式化。它最初由Al Aho、Peter Weinberger和Brian Kernighan在1977年设计，并以他们的姓氏命名（A、W、K）。awk可以读取文本文件中的每一行，并将其分解成字段。然后，通过应用用户定义的规则和指令，可以从这些字段中提取信息并执行各种操作。
      • awk的基本语法结构为：awk 'pattern { action }' file。其中，pattern是一个正则表达式，用于匹配需要处理的文本行；action是要执行的操作，可以是打印、计算、条件判断等等。如果没有指定文件名，则awk默认从标准输入读取数据。
      • awk有很多内置变量和函数，例如$0表示整个文本行，NF表示当前行的字段数量，print函数用于输出文本等等。此外，awk还支持数组、循环、条件语句等高级编程功能，使得它成为处理大型结构化文本文件的强大工具。
      • 总之，awk是一种非常实用的文本处理工具，可以帮助我们快速而方便地处理大量数据，并方便地生成报告或者其他需要的输出格式。

  • 三剑客工具的组合可以完成各种文本处理任务，而且它们都是Linux系统自带的工具，无需安装额外软件即可使用

  • 配合awk一键查询指定pod的配置

    • kubectl -n app get pod|grep user|awk '{print $1}'|xargs kubectl -n app logs --tail 50 -f

    • 没用他之前可能需要两个命令

      • 查找pod

        • kubectl -n app get pod|grep user

      • 根据输出的pod查询日志

        • kubectl -n app logs --tail 50 -f pod_name

  • 配合awk一键重启指定pod

    • kubectl -n app get pod|grep user|awk '{print $1}'|xargs kubectl -n app delete pod

    • 没用他之前可能需要两个命令

      • 查找pod

        • kubectl -n app get pod|grep user

      • 根据输出的pod,在删除他

        • kubectl -n app delete pod_name

  • 配合awk一键重启指定kill进程进程

    • ps -ef|grep filter_condition|grep -v grep|awk '{print $2}'|xargs sudo kill -9

    • 没用他之前可能需要两个命令

      • 查找指定进程

        • ps -ef|grep filter_condition|grep -v grep

        • grep -v grep

          • 反选输出的结果，这里的作用是过滤输出的grep进程

      • kill查找出来的进程

        • sudo kill -9 pid
posted @ 2023-04-20 15:06  wan了个蛋  阅读(424)  评论(0)  编辑  收藏  举报