(1)K8S的全称为Kubernetes。
(2)用于自动部署、不熟和管理“容器化(containerized)应用程序”的开源系统,可以理解成K8S是负责自动化运维管理多个容器化程序(比如Docker)的集群,是一个生态极其丰富的容器编排框架工具
K8S由google的Brog系统(博格系统,google内部使用的大规模容器编排工具)作为原型,后经GO语言沿用Brog的思路重写并捐献给CNCF基金会开源
词根源于希腊语的舵手、飞行员
官网(官方文档):
https://kubernetes.io
GitHub(软件包):
https://github.com/kubernetes/kubernetes
试想下传统的后端部署办法:把程序包(包括可执行二进制文件、配置文件等)放到服务器上,接着运行启动脚本把程序跑起来,同时启动守护脚本定期检查程序运行状态,必要的话重新拉起程序。
设想一下,如果服务的请求量上来,已部署的服务响应不过来怎么办?传统的做法往往是,如果请求量、内存、CPU超过阈值做了告警,运维人员马上再加几台服务器,部署好服务之后,接入负载均衡来分担已有服务的压力
这样问题就出现了:从监控告警到不舒服无,中间需要人力介入。name,有没有办法自动完成服务的部署、更新、卸载和扩容和缩容呢
而这就是K8S要做的事情:自动化运维管理容器化(docker)程序
K8S的目标就是让部署容器化应用简单高效
(1)单机使用,无法有效集群
(2)随着容器数量的上升,管理成本攀升
(3)没有有效的容灾、自愈机制
(4)没有预设编排模板,无法实现快速、大规模容器调度
(5)没有统一的配置管理中心工具
(6)没有容器生命周期的管理工具
(7)没有图形化运维管理工具
K8S提供了容器编排、资源调度、弹性伸缩、部署管理、服务发现等一系列功能
(1)弹性伸缩
使用命令、UI或者基于CPU使用情况自动快速扩容或缩容应用程序,保证应用业务高峰并发时的高可用性:业务低峰时回收资源,以最小成本运行服务
(2)自我修复
在节点故障时重新启动失败的容器,替换和重新部署,保证预期的副本数量,杀死健康检查失败的容器,并且在未准备好之前不会处理客户端请求,确保线上服务不中断
(3)服务发现和负载均衡
K8S为多个容器提供一个统一访问入口(内部IP地址和一个DNS名称),并且负载均衡关联的所有容器,使得用户无需考虑容器IP问题
(4)自动发布(默认滚动发布模式)和回滚
K8S采用回滚更新策略更新应用,一次更新一个pod,而不是同时删除所有pod,如果更新过程中出现问题,将回滚更改,确保升级不影响业务
(5)集中化配置管理和密钥管理
管理机密数据和应用程序配置,而不需要把敏感数据宝路在镜像里,提高敏感数据安全性。并可以将一些常用的配置存储在K8S中,方便应用程序使用
(6)存储编排,支持外挂存储并对外挂存储资源进行编排
挂载外部存储系统,无论是来自本地存储,公有云(如AWS),还是网络存储(如NFS、Glusterfs、Ceph)都作为集群资源的一部分使用,极大提高存储使用灵活性
(7)任务批处理运行
提供一次性任务,定时任务,满足批量数据处理和分析的场景
K8S是属于主从设备模型(master-slave架构),即有master节点负责集群的调度、管理和运维,slave节点是集群中的运算工作负载节点
在k8s中,主节点一般称为master节点,而从节点则被称为worker node节点,每个node都会被master分配一些工作负载
master组件可以在群集中的任何计算机上运行,但建议master节点占据一个独立的服务器,因为master是整个集群的大脑,如果master所在节点宕机或不可用,那么所有的控制命令都将失效。除了master,在K8S急群众的其他机器被称为worker node节点,当某个node宕机时,其上的工作负载会被master自动转移到其他节点上去。
(1)Master节点组件
kubi-apiserver:所有服务访问的统一入口
controller-manager:维持集群处于预期的工作状态(副本期望数目),管理资源控制器的控制器,负责在节点出现故障时进行通知和响应,负责对节点的pod状态进行监控
这些控制器主要包括 :
• Node controller(节点控制器):负责在节点出现故障时发现和响应
• Replication Controller (副本控制器) :负责保证集群中一个RC (资源对 象Replication Controller) 所关联的Pod,可以理解端点 是 一个服务暴露出来的访问点,如果需要访问一个服务,则必须知道它的endpoint
• Service Account & Token Controllers ( 服务帐户和令牌控制器) :为新的命名空间创建默认帐户和API访问令牌
• ResourceQuota Controller(资源配额控制器):确保指定的资源对象在任何时候都不会超量占用系统物理资源
• Namespace Controller ( 命名空间控制器) :管理namespace的生命周期
• Service Controller (服务控制器) :属于K8S集群与外部的云平台之间的一个接口控制器
scheduler(死该就了):选择合适的node节点调度pod
etcd(配置存储中心):K8S的存储服务。是分布式键值存储系统
(2)Worker Node节点组件
Kubelet:监视node节点上的资源和服务状态并汇报给APIServer,跟容器引擎交互实现容器的生命周期管理
kube-proxy:实现负载均衡,是service资源的载体,负责写入规则值iptables、ipvs实现服务映射访问的容器引擎:docker,docker用来创建、管理容器
docker或rocket:容器引擎,运行容器,负责本机的容器创建和管理工作
用户通过客户端发送请求给APIserver,APIserver会先将用户的请求信息写入到etcd存储当中,然后API Server会让Controller-manager去创建对应的pod。Controller-manager会通过APIServer去读取etcd当中的用户的请求信息按照模板创建pod,通过APIserver找Scheduler去调度pod,Scheduler通过预算策略和优选策略筛选出适合的Node节点,然后再把pod调度到筛选出的Node节点上,然后通知APIserver去找到对应Node节点上的kubelet,由kubelet创建pod,同时kubelet会监控node节点上的资源信息
包括pod状态并存储到etcd中,如果需要将pod发布出去,通过kube-proxy创建转发规则,承载service把服务发布出去,供用户访问
在K8S集群中,Service可以看作一组提供相同服务的Pod的对外访问接口。客户端需要访问的服务就是Service对象。每个Service都有一个固定的虚拟ip (这个ip也被称为Cluster IP) ,自动并且动态地绑定后端的Pod, 所有的网络请求直接访问Service的虚拟ip,Service会自动向后端做转发。通俗来说就是Service通过标签选择器选择那些关联了对应label的Pod,把Pod的IP加入到自己的endpoints当中,当service收到请求后根据endpoints里的ip进行转发
客户端使用http/https通过url路径访问K8S集群里的Ingress接入层对外暴露的接口,Ingress层收到请求后找到对应是Service,Service根据标签选择器筛选查询label对应的Pod,根据Pod的IP进行转发获取相应服务
Kubernetes包含多种类型的资源对象: Pod、 Label、 Service、 Replication Controller等
所有的资源对象都可以通过Kubernetes提供的kubectl工具进行增、删、改、查等操作,并将其保存在etcd中持久化存储
Kubernets其实是一个高度自动化的资源控制系统,通过跟踪对比etcd存储里保存的资源期望状态与当前环境中的实际资源状态的差异,来实现自动控制和自动纠错等高级功能
(1)Pod是Kubernetes创建或部署的最小/最简单的基本单位,一个Pod 代表集群上正在运行的一个进程,可以把Pod理解成豌豆荚,而同一Pod内的每个容器是一颗颗豌豆
(2)一个Pod由一个或多个容器组成,Pod中容器共享网络、存储和计算资源,在同一台Docker主机上运行
(3)一个Pod里可以运行多个容器,又叫边车模式(sideCara) 模式。而在生产环境中一般都是单个容器或者具有强关联互补的多个容器组成一个Pod
(4)同一个Pod之间的容器可以通过localhost互相访问,并且可以挂载Pod内所有的数据卷;但是不同的Pod之间的容器不能用localhost访问,也不能挂载其他Pod的数据卷
pod控制器是pod启动的一种模板,用来保证在K8S里启动的pod应始终按照用户的预期运行(副本数、生命周期、健康状态检查等)
K8S内提供了众多的Pod控制器,常用的有以下几种:
(1)Deployment:无状态应用部署。Deployment 的作用是管理和控制Pod和Replicaset, 管控它们运行在用户期望的状态中
(2)Replicaset:确保预期的Pod副本数量。Replicaset的作用就是管理和控制Pod,管控他们好好干活。但是,Replicaset受控于Deployment 可以理解成Deployment 就是总包工头,主要负责监督底下的工人Pod干活,确保每时每刻有用户要求数量的Pod在工作,如果一旦发现某个工人Pod不行了,就赶紧新拉一个Pod过来替换它。而ReplicaSet就是总包工头手下的小包工头。从K8S使用者角度来看,用户会直接操作Deployment部署服务,而当Deployment被部署的时候,K8S会自动生成要求的ReplicaSet和Pod。用户只需要关心Deployment而不操心ReplicaSet资源对象Replication Controller是ReplicaSet的前身,官方推荐用Deployment取代Replication Controller来部署服务
(3)Daemonset:确保所有节点运行同一类Pod,保证每个节点上都有一个此类Pod运行,通常用于实现系统级后台任务
(4)Statefulset:有状态应用部署
(5)Job:一次性任务。根据用户的设置,Job管理的Pod把任务成功完成就自动退出了
(6)ronjob:周期性计划性任务
(1)标签,是K8S特色的管理方式,便于分类管理资源对象
(2)Label可以附加到各种资源对象上,例如Node、Pod、Service、 RC等,用于关联对象、查询和筛选
(3)一个Label是一个key-value 的键值对,其中key 与value 由用户自己指定
(4)一个资源对象可以定义任意数量的Label,同一个Label也可以被添加到任意数量的资源对象中,也可以在对象创建后动态添加或者删除
(5)可以通过给指定的资源对象捆绑一个或多个不同的Label,来实现多维度的资源分组管理功能
(6)与Label类似的,还有Annotation (注释)。区别在于有效的标签值必须为63个字符或更少,并且必须为空或以字母数字字符([a-z0-9A-Z]) 开头和结尾,中间可以包含横杠(-)、下划线(_)、点(.)和字母或数字。注释值则没有字符长度限制
(1)给某个资源对象定义一个Label, 就相当于给它打了一个标签;随后可以通过标签选择器(Label selector) 查询和筛选拥有某些Label的资源对象
(2)标签选择器目前有两种:基于等值关系(等于、不等于)和基于集合关系(属于、不属于、存在)
(1)在K8S的集群里,虽然每个Pod会被分配一个单独的IP地址,但由于Pod是有生命周期的(它们可以被创建,而且销毁之后不会再启动),随时可能会因为业务的变更,导致这个IP地址也会随着Pod的销毁而消失
(2)Service就是用来解决这个问题的核心概念:K8S中的Service并不是我们常说的“服务”的含义,而更像是网关层,可以看作一组提供相同服务的Pod的对外访问接口、流量均衡器
(3)Service作用于哪些Pod是通过标签选择器来定义的:在K8S集群中,Service可以看作一组提供相同服务的Pod的对外访问接口。客户端需要访问的服务就是Service对象。每个Service都有一个固定的虚拟ip (这个ip也被称为Cluster IP) ,自动并且动态地绑定后端的Pod, 所有的网络请求直接访问Service的虚拟ip,Service会自动向后端做转发。通俗来说就是Service通过标签选择器选择那些关联了对应label的Pod,把Pod的IP加入到自己的endpoints当中,当service收到请求后根据endpoints里的ip进行转发
(4)Service除了提供稳定的对外访问方式之外,还能起到负载均衡(Load Balance) 的功能,自动把请求流量分布到后端所有的服务上,service可以做到对客户透明地进行水平扩展(scale),实现service这一功能的关键,就是kube-proxy。 kube -proxy运行在每个节点上,监听API Server中服务对象的变化,可通过以下三种流量调度模式: userspace (废弃)、iptables (濒临废弃)、ipvs (推荐,性能最好)来实现网络的转发
(5)Service是K8S服务的核心,屏蔽了服务细节,统一对外暴露服务接口, 真正做到了“微服务”。比如我们的一个服务A,部署了3个副本,也就是3个Pod;对于用户来说,只需要关注一个Service 的入口就可以,而不需要操心究竞应该请求哪一个Pod。优势非常明显:一方面外部用户不需要感知因为Pod. 上服务的意外崩溃、 K8S重新拉起Pod而造成的IP变更,外部用户也不需要感知因升级、变更服务带来的Pod替换而造成的IP变化
Service主要负责K8S集群内部的网络拓扑,那么集群外部怎么访问集群内部呢?这个时候就需要Ingress了。Ingress是转增个K8S集群的接入层,负责集群内外通讯 Ingress是K8S集群里工作在OSI网络参考模型下,第7层的应用,对外暴露的接口,典型的访问方式是http/https Service只能进行第四层的流量调度,表现形式是ip+port。Ingress则可以调度不同业务域、不同URL访问路径的业务流量 比如:客户端请求http://www.123.com:port --->Ingress --->Service --->Pod
(1)由于K8S内部,使用“资源”来定义每一种逻辑概念(功能),所以每种“资源”,都应该有自己的“名称”
(2)“资源”有api版本(apiversion)、类别(kind)、元数据(metadata)、定义清单(spec)、状态(status)等配置信息
(3)“名称”通常定义在“资源”的“元数据”信息里。在同一个 namespace空间中必须是唯一的
(1)随着项目增多、人员增加、集群规模的扩大,需要一种能够逻辑上隔离K8S 内各种“资源"的方法,这就是Namespace
(2)Namespace是为了把一个K8S集群划分为若千个资源不可共享的虚拟集群组而诞生的
(3)不同Namespace 内的“资源”名称可以相同,相同Namespace 内的同种“资源”, “名称”不能相同
(4)合理的使用K8S的Namespace,可以使得集群管理员能够更好的对交付到K8S里的服务进行分类管理和浏览
(5)K8S里默认存在的Namespace 有: default、 kube-system、 kube-public 等
(6)查询K8S里特定“资源”要带上相应的Namespace