Kubernetes

• ansible：应用级别的多机编排工具

• docker:容器引擎，容器运行时

  • dockerfile：构建镜像
  • docker-compose：单机容器集群编排工具
  • docker-swarm：Docker旗下的容器多机编排工具，师实现Docker容器集群管理调度的工具
  • kubernetes：Google旗下的容器多机编排工具，占据80%以上的市场份额，已经成为容器编排工具的事实标准
  • mesos+marathon：
    • mesos：分布式资源管理框架，可以对集群中的多台主机的硬件资源进行统一的调度和管理
    • marathon：mesos的容器编排框架，用来调度和运行容器的服务

• 云原生：诞生于云，运行于云的程序，云是容器云，屏蔽底层环境差异

K8S概述

作用

• 用于自动部署、扩展和管理“容器化（containerized）应用程序”的开源系统
• 可以理解成 K8S 是负责自动化运维管理多个容器化程序（比如 Docker）的集群，是一个生态极其丰富的容器编排框架工具。

官网：
https://kubernetes.io

GitHub：
https://github.com/kubernetes/kubernetes

为什么使用K8S

• 自动完成服务的部署、更新、卸载和扩容、缩容的方法

  • 上云
  • K8S

• K8S 要做的事情：自动化运维管理容器化（Docker）程序

• K8S是Google开源的容器集群管理系统，在Docker等容器技术的基础上，为容器化的应用提供部署运行、资源调度、服务发现和动态伸缩等一系列完整功能，提高了大规模容器集群管理的便捷性

主要功能

• 跨主机编排容器。
• 更充分地利用硬件资源来最大化地满足企业应用的需求。
• 控制与自动化应用的部署与升级。
• 为有状态的应用程序挂载和添加存储器。
• 线上扩展或缩减容器化应用程序与它们的资源。
• 声明式的容器管理，保证所部署的应用按照我们部署的方式运作。
• 通过自动布局、自动重启、自动复制、自动伸缩实现应用的状态检查与自我修复。
• 为多个容器提供服务发现和负载均衡，使得用户无需考虑容器IP问题

1. 无状态应用：不需要数据交换的应用
2. 有状态应用：有数据读写或数据存储功能的应用

Kubernetes 集群架构与组件

• K8S 是属于主从设备模型（Master-Slave 架构），即有 Master 节点负责集群的调度、管理和运维，Slave 节点是集群中的运算工作负载节点。
• 在 K8S 中，主节点一般被称为 Master 节点，而从节点则被称为 Worker Node 节点，每个 Node 都会被 Master 分配一些工作负载。
• Master 组件可以在群集中的任何计算机上运行，但建议 Master 节点占据一个独立的服务器。因为 Master 是整个集群的大脑，如果 Master 所在节点宕机或不可用，那么所有的控制命令都将失效。除了 Master，在 K8S 集群中的其他机器被称为 Worker Node 节点，当某个 Node 宕机时，其上的工作负载会被 Master 自动转移到其他节点上去。

总结：

• K8S有master和worker node两大节点
• master节点上有 apiserver、controller-manager、scheduler以及使用etcd做K8S集群的数据库
• node节点上有 kubelet 、kube-proxy、容器引擎/容器运行时

核心组件

Master组件

Kube-apiserver

• 用于暴露 Kubernetes API，任何资源请求或调用操作都是通过 kube-apiserver 提供的接口进行。
• 以 HTTP Restful API 提供接口服务，所有对象资源的增删改查和监听操作都交给 API Server 处理后再提交给 Etcd 存储。
• 可以理解成 API Server 是 K8S 的请求入口服务。
• API Server 负责接收 K8S 所有请求（来自 UI 界面或者 CLI 命令行工具）， 然后根据用户的具体请求，去通知其他组件干活。可以说 API Server 是 K8S 集群架构的大脑。

Kube-controller-manager

• 运行管理控制器，是 K8S 集群中处理常规任务的后台进程，是 K8S 集群里所有资源对象的自动化控制中心。

• 在 K8S 集群中，一个资源对应一个控制器，而 Controller manager 就是负责管理这些控制器的。

• 由一系列控制器组成，通过 API Server 监控整个集群的状态，并确保集群处于预期的工作状态，比如当某个 Node 意外宕机时，Controller Manager 会及时发现并执行自动化修复流程，确保集群始终处于预期的工作状态。

• 这些控制器主要包括：

  • Node Controller（节点控制器）：负责在节点出现故障时发现和响应。
  • Replication Controller（副本控制器）：负责保证集群中一个 RC（资源对象 Replication Controller）所关联的 Pod 副本数始终保持预设值。可以理解成确保集群中有且仅有 N 个 Pod 实例，N 是 RC 中定义的 Pod 副本数量。
  • Endpoints Controller（端点控制器）：填充端点对象（即连接 Services 和 Pods），负责监听 Service 和对应的 Pod 副本的变化。 可以理解端点是一个服务暴露出来的访问点，如果需要访问一个服务，则必须知道它的 endpoint。
  • Service Account & Token Controllers（服务帐户和令牌控制器）：为新的命名空间创建默认帐户和 API 访问令牌。
  • ResourceQuota Controller（资源配额控制器）：确保指定的资源对象在任何时候都不会超量占用系统物理资源。
  • Namespace Controller（命名空间控制器）：管理 namespace 的生命周期。
  • Service Controller（服务控制器）：属于 K8S 集群与外部的云平台之间的一个接口控制器。

Kube-scheduler

• 是负责资源调度的进程，根据调度算法为新创建的 Pod 选择一个合适的 Node 节点。
• 可以理解成 K8S 所有 Node 节点的调度器。
• 当用户要部署服务时，Scheduler 会根据调度算法选择最合适的 Node 节点来部署 Pod。
  • 预选策略（predicate）
  • 优选策略（priorities）

工作

• API Server 接收到请求创建一批 Pod ，API Server 会让 Controller-manager 按照所预设的模板去创建 Pod，Controller-manager 会通过 API Server 去找 Scheduler 为新创建的 Pod 选择最适合的 Node 节点。
• 比如运行这个 Pod 需要 2C4G 的资源，Scheduler 会通过预选策略过滤掉不满足策略的 Node 节点。
• Node 节点中还剩多少资源是通过汇报给 API Server 存储在 etcd 里，API Server 会调用一个方法找到 etcd 里所有 Node 节点的剩余资源，再对比 Pod 所需要的资源，如果某个 Node 节点的资源不足或者不满足 预选策略的条件则无法通过预选。
• 预选阶段筛选出的节点，在优选阶段会根据优选策略为通过预选的 Node 节点进行打分排名， 选择得分最高的 Node。例如，资源越富裕、负载越小的 Node 可能具有越高的排名。

配置存储中心

etcd

• K8S 的存储服务。etcd 是分布式键值存储系统，存储了 K8S 的关键配置和用户配置
• K8S 中仅 API Server 才具备读写权限，其他组件必须通过 API Server 的接口才能读写数据。

Node组件

Kubelet

• Node 节点的监视器，以及与 Master 节点的通讯器。
• Kubelet 是 Master 节点安插在 Node 节点上的“眼线”，它会定时向 API Server 汇报自己 Node 节点上运行的服务的状态，并接受来自 Master 节点的指示采取调整措施。
• 从 Master 节点获取自己节点上 Pod 的期望状态（比如运行什么容器、运行的副本数量、网络或者存储如何配置等）， 直接跟容器引擎交互实现容器的生命周期管理，如果自己节点上 Pod 的状态与期望状态不一致，则调用对应的容器平台接口（即 docker 的接口）达到这个状态。
• 管理镜像和容器的清理工作，保证节点上镜像不会占满磁盘空间，退出的容器不会占用太多资源。

Kube-Proxy

• 在每个 Node 节点上实现 Pod 网络代理，是 Kubernetes Service 资源的载体，负责维护网络规则和四层负载均衡工作。 负责写入规则至iptables、ipvs实现服务映射访问的。
• Kube-Proxy 本身不是直接给 Pod 提供网络，Pod 的网络是由 Kubelet 提供的，Kube-Proxy 实际上维护的是虚拟的 Pod 集群网络。
• Kube-apiserver 通过监控 Kube-Proxy 进行对 Kubernetes Service 的更新和端点的维护。
• 在 K8S 集群中微服务的负载均衡是由 Kube-proxy 实现的。Kube-proxy 是 K8S 集群内部的负载均衡器。它是一个分布式代理服务器，在 K8S 的每个节点上都会运行一个 Kube-proxy 组件。

docker 或 containerd

• 容器引擎，运行容器，负责本机的容器创建和管理工作。
• 当 kubernetes 把 pod 调度到节点上，节点上的 kubelet会指示 docker 启动特定的容器。接着，kubelet 会通过 docker 持续地收集容器的信息， 然后提交到主节点上。
• docker 会如往常一样拉取容器镜像、启动或停止容器。不同点仅仅在于这是由自动化系统控制而非管理员在每个节点上手动操作的。

总结：

• master节点
  • apiserver：是所有服务请求的统一访问入口
  • controller-manager：控制器管理器，负责管理pod副本集、命名空间、端点、node等资源对象以及部署的控制器；通过apiserver监控整个k8s集群的状态，并确保集群处于预期的工作状态
  • scheduler：资源调度器，负责pod资源的调度，通过调度算法（预选策略、优选策略）为部署的pod选择最适合的node节点
  • etcd：k8s集群的数据库，是一种键值对存储结构的分布式数据库，负责存储k8s集群所有的重要信息，只有apiserver有读写权限
• node节点
  • kubelet：接收master发来的请求，创建和管理POd和容器，跟容器引擎交互实现pod/容器的生命周期的管理；收集node节点的资源信息和pod的运行状态汇报给master的apiserver
  • kube-proxy：作为service的资源的载体，实现pod的网络代理，维护网络规则和四层负载均衡工作
  • 容器引擎/容器运行时：运行容器

工作流程

• 简要的pod创建流程
  • 用户通过客户端发送创建pod的请求到master节点上的apiserver
  • apiserver会先把请求信息写入到etcd中保存，再找controller-manager根据预设的资源配置模板创建pod资源
  • 然后，controller-manager会通过apiserver去找scheduler为新创建的pod选择最合适的node节点
  • scheduler通过调度算法的预选策略和优选策略算出最合适的node节点进行调度
  • 然后再通过apiserver找到对应的node节点上的kubelet去创建和管理pod
  • kubelet会跟容器引擎交互来管理pod/容器的生命周期
  • 用户还可通过apiserver再kube-proxy写入网络规则，创建service资源，实现对pod的服务发现和负载均衡

K8S核心概念

• Kubernetes 包含多种类型的资源对象：Pod、Label、Service、Replication Controller 等。
• 所有的资源对象都可以通过 Kubernetes 提供的 kubectl 工具进行增、删、改、查等操作，并将其保存在 etcd 中持久化存储。
• Kubernets其实是一个高度自动化的资源控制系统，通过跟踪对比etcd存储里保存的资源期望状态与当前环境中的实际资源状态的差异，来实现自动控制和自动纠错等高级功能。

Pod

• Pod是 Kubernetes 创建或部署的最小/最简单的基本单位，一个 Pod 代表集群上正在运行的一个进程。
• 可以把 Pod 理解成豌豆荚，而同一 Pod 内的每个容器是一颗颗豌豆。
• 一个 Pod 由一个或多个容器组成，Pod 中容器共享网络、存储和计算资源，在同一台 Docker 主机上运行。
• 一个 Pod 里可以运行多个容器，又叫边车模式（SideCar）。而在生产环境中一般都是单个容器或者具有强关联互补的多个容器组成一个 Pod。
• 同一个 Pod 之间的容器可以通过 localhost 互相访问，并且可以挂载 Pod 内所有的数据卷；但是不同的 Pod 之间的容器不能用 localhost 访问，也不能挂载其他 Pod 的数据卷。

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-R51CXCam-1691041559884)(E:\Typora\images\image-20230801141112916.png)]

Pod控制器

• Pod 控制器是 Pod 启动的一种模版，用来保证在K8S里启动的 Pod 应始终按照用户的预期运行（副本数、生命周期、健康状态检查等）。
• K8S 内提供了众多的 Pod 控制器，常用的有以下几种：

Deployment

• 无状态应用部署

• Deployment 的作用是管理和控制 Pod 和 ReplicaSet，管控它们运行在用户期望的状态中。

Replicaset

• 确保预期的 Pod 副本数量

• ReplicaSet 的作用就是管理和控制 Pod，管控他们好好干活。但是，ReplicaSet 受控于 Deployment。

• 可以理解成 Deployment 就是总包工头，主要负责监督底下的工人 Pod 干活，确保每时每刻有用户要求数量的 Pod 在工作。如果一旦发现某个工人 Pod 不行了，就赶紧新拉一个 Pod 过来替换它。而ReplicaSet 就是总包工头手下的小包工头。

• 从 K8S 使用者角度来看，用户会直接操作 Deployment 部署服务，而当 Deployment 被部署的时候，K8S 会自动生成要求的 ReplicaSet 和 Pod。

• 用户只需要关心 Deployment 而不操心 ReplicaSet。

• 资源对象 Replication Controller 是 ReplicaSet 的前身，官方推荐用 Deployment 取代 Replication Controller 来部署服务。

Daemonset

• 确保所有节点运行同一类 Pod，保证每个节点上都有一个此类 Pod 运行，通常用于实现系统级后台任务。

Statefulset

• 有状态应用部署

Job

• 一次性任务。根据用户的设置，Job 管理的 Pod 把任务成功完成就自动退出了。

Cronjob

• 周期性计划性任务

Label

• 标签，是 K8S 特色的管理方式，便于分类管理资源对象。
• Label 可以附加到各种资源对象上，例如 Node、Pod、Service、RC 等，用于关联对象、查询和筛选。
• 一个 Label 是一个 key-value 的键值对，其中 key 与 value 由用户自己指定。
• 一个资源对象可以定义任意数量的Label，同一个Label 也可以被添加到任意数量的资源对象中，也可以在对象创建后动态添加或者删除。
• 可以通过给指定的资源对象捆绑一个或多个不同的 Label，来实现多维度的资源分组管理功能。
• 与 Label 类似的，还有 Annotation（注释）。
• 区别在于有效的标签值必须为63个字符或更少，并且必须为空或以字母数字字符（[a-z0-9A-Z]）开头和结尾，中间可以包含横杠（-）、下划线（_）、点（.）和字母或数字。
• 注释值则没有字符长度限制。

Label 选择器（Label selector）

• 给某个资源对象定义一个 Label，就相当于给它打了一个标签；随后可以通过标签选择器（Label selector）查询和筛选拥有某些 Label 的资源对象。
• 标签选择器目前有两种：基于等值关系（等于、不等于）和基于集合关系（属于、不属于、存在）。

Service

• 在K8S的集群里，虽然每个Pod会被分配一个单独的IP地址，但由于Pod是有生命周期的（它们可以被创建，而且销毁之后不会再启动），随时可能会因为业务的变更，导致这个 IP 地址也会随着 Pod 的销毁而消失。

• Service 就是用来解决这个问题的核心概念。

• K8S 中的 Service 并不是我们常说的“服务”的含义，而更像是网关层，可以看作一组提供相同服务的Pod的对外访问接口、流量均衡器。

• Service 作用于哪些 Pod 是通过标签选择器来定义的。

• 在 K8S 集群中，Service 可以看作一组提供相同服务的 Pod 的对外访问接口。客户端需要访问的服务就是 Service 对象。每个 Service 都有一个固定的虚拟 ip（这个 ip 也被称为 Cluster IP），自动并且动态地绑定后端的 Pod，所有的网络请求直接访问 Service 的虚拟 ip，Service 会自动向后端做转发。

• Service 除了提供稳定的对外访问方式之外，还能起到负载均衡（Load Balance）的功能，自动把请求流量分布到后端所有的服务上，Service 可以做到对客户透明地进行水平扩展（scale）。

• 而实现 service 这一功能的关键，就是 kube-proxy。kube-proxy 运行在每个节点上，监听 API Server 中服务对象的变化， 可通过以下三种流量调度模式： userspace（废弃）、iptables（濒临废弃）、ipvs（推荐，性能最好）来实现网络的转发。

• Service 是 K8S 服务的核心，屏蔽了服务细节，统一对外暴露服务接口，真正做到了“微服务”。比如我们的一个服务 A，部署了 3 个副本，也就是 3 个 Pod； 对于用户来说，只需要关注一个 Service 的入口就可以，而不需要操心究竟应该请求哪一个 Pod。

• 优势非常明显：一方面外部用户不需要感知因为 Pod 上服务的意外崩溃、K8S 重新拉起 Pod 而造成的 IP 变更， 外部用户也不需要感知因升级、变更服务带来的 Pod 替换而造成的 IP 变化。

Ingress

• Service 主要负责 K8S 集群内部的网络拓扑，那么集群外部怎么访问集群内部呢？这个时候就需要 Ingress 了。Ingress 是整个 K8S 集群的接入层，负责集群内外通讯。
• Ingress 是 K8S 集群里工作在 OSI 网络参考模型下，第7层的应用，对外暴露的接囗，典型的访问方式是 http/https。
• Service 只能进行第四层的流量调度，表现形式是 ip+port。
• ngress 则可以调度不同业务域、不同URL访问路径的业务流量。
• 比如：客户端请求 http://www.kgc.com:port —> Ingress —> Service —> Pod

Name

• 由于 K8S 内部，使用 “资源” 来定义每一种逻辑概念（功能），所以每种 “资源”，都应该有自己的 “名称”。
• “资源” 有 api 版本（apiversion）、类别（kind）、元数据（metadata）、定义清单（spec）、状态（status）等配置信息。
• “名称” 通常定义在 “资源” 的 “元数据” 信息里。在同一个 namespace 空间中必须是唯一的。

Namespace

• 随着项目增多、人员增加、集群规模的扩大，需要一种能够逻辑上隔离 K8S 内各种 “资源” 的方法，这就是 Namespace。
• Namespace 是为了把一个 K8S 集群划分为若干个资源不可共享的虚拟集群组而诞生的。
• 不同 Namespace 内的 “资源” 名称可以相同，相同 Namespace 内的同种 “资源”，“名称” 不能相同。
• 合理的使用 K8S 的 Namespace，可以使得集群管理员能够更好的对交付到 K8S 里的服务进行分类管理和浏览。
• K8S 里默认存在的 Namespace 有：default、kube-system、kube-public 等。
• 查询 K8S 里特定 “资源” 要带上相应的 Namespace。

总结：

K8S资源对象

• pod：是K8S能够创建和管理的最小单元，一个pod里可以包含一个或多个应用容器，pod里的容器之间共享网络、存储等资源。（localhost通信）

• pod控制器：

  • deployment：部署无状态应用。同时负责管理replicaset（维持pod副本期望数量）和pod（一个容器化的应用进程）
  • statefulset：部署有状态应用
  • daemonset：在所有的node节点上部署同一种pod
  • job：部署一次性短期任务的pod，pod执行完任务就会自动退出
  • cronjob：周期性的部署短期任务的pod，pod执行完任务就会自动退出

• service：在K8S集群内部，为通过标签选择器相关联的一组Pod，提供一个统一的访问入口地址（clusterIP），只支持四层代理转发

• ingress：作为K8S集群外部接入层，可自定义规则根据用户请求的域名或URL访问路径转发给指定的service，支持七层代理转发

• K8S资源配置信息（name）：

  • Apiversion：每种资源对象在K8S中使用的api接口版本
  • Kind： 资源对象的类型
  • Matedata： 资源对象的元数据，比如 name资源名称，namespace命名空间，labels标签，annotations注释
  • Spec： 资源对象的资源配置清单（配置属性），比如 副本数，镜像名，数据卷，标签选择器 等
  • Status： 资源对象的当前运行状态信息

• label：标签，将键值对配置到任何资源对象上，用于选择资源

• label selector：标签选择器，用于查询和筛选拥有某些 label 的资源对象

• annotation：注释，使用元数据来装饰资源，可用于作资源对象的注释或设置资源对象额外的功能特性配置

• name：资源名称，在同一个命名空间中，同类型的资源对象的名称是唯一的