【K8S系列】Kubernetes集群资源管理与调度深度分析

在这里插入图片描述

在现代微服务架构中，Kubernetes（K8s）作为容器编排平台，提供了强大的资源管理和调度能力。然而，随着应用规模的扩大和复杂性增加，如何高效地管理和调度集群资源成为一个关键挑战。本文将深入探讨
Kubernetes 中的资源管理策略，重点介绍资源请求和限制、资源配额、限制策略、调度策略以及监控与自动调整机制。

1. 资源请求与限制

1.1 定义与重要性

在 Kubernetes 中，资源请求（requests）和资源限制（limits）是确保应用稳定性和性能的基础。请求定义了 Pod 启动时所需的最低资源量，而限制则指定了 Pod 可以使用的资源上限。合理的配置可以避免资源争用和过度使用，确保集群的整体健康。

1.2 示例配置

以下是一个 Pod 配置的示例，其中包含资源请求和限制：

apiVersion: v1
kind: Pod
metadata:
  name: example-pod
spec:
  containers:
    - name: example-container
      image: nginx
      resources:
        requests:
          cpu: "500m"
          memory: "512Mi"
        limits:
          cpu: "1"
          memory: "1Gi"

在这个示例中，Pod 请求 500m 的 CPU 和 512Mi 的内存，限制为 1 CPU 和 1Gi 内存。这种配置确保了调度器在选择节点时考虑 Pod 的需求，并防止 Pod 使用过多资源。

2. 资源配额（Resource Quotas）

2.1 定义与功能

资源配额是 Kubernetes 中用于限制命名空间内资源使用的机制。通过设置资源配额，可以确保不同团队或应用在共享集群资源时的公平性，防止某一命名空间占用过多资源。

2.2 配置示例

以下是一个资源配额的配置示例：

apiVersion: v1
kind: ResourceQuota
metadata:
  name: example-quota
  namespace: example-namespace
spec:
  hard:
    requests.cpu: "2"
    requests.memory: "4Gi"
    limits.cpu: "4"
    limits.memory: "8Gi"
    persistentvolumeclaims: "5"

在此示例中，example-namespace 命名空间的 Pod 最多可以请求 2 CPU 和 4Gi 内存，限制为 4 CPU 和 8Gi 内存，同时最多可以创建 5 个 PersistentVolumeClaim。这种做法确保了资源的合理分配和使用。

3. 资源限制策略（LimitRanges）

3.1 定义与作用

资源限制策略（LimitRanges）允许在命名空间中设置 Pod 的默认请求和限制。通过定义合理的范围，可以确保所有 Pod 在创建时都遵循一定的资源使用规范。

3.2 配置示例

以下是一个 LimitRange 的配置示例：

apiVersion: v1
kind: LimitRange
metadata:
  name: example-limit-range
  namespace: example-namespace
spec:
  limits:
    - default:
        cpu: "500m"
        memory: "1Gi"
      defaultRequest:
        cpu: "250m"
        memory: "512Mi"
      type: Container

在这个示例中，对于 example-namespace 中的所有容器，默认请求为 250m CPU 和 512Mi 内存，限制为 500m CPU 和 1Gi 内存。这确保了每个 Pod 都在合理的资源范围内运行。

4. 调度策略

4.1 自定义调度

Kubernetes 的调度器负责将 Pod 调度到合适的节点。通过使用节点亲和性和污点/容忍机制，可以实现更灵活的调度策略。

节点亲和性示例

通过节点亲和性，可以限制 Pod 只能调度到特定标签的节点上：

affinity:
  nodeAffinity:
    requiredDuringSchedulingIgnoredDuringExecution:
      nodeSelectorTerms:
        - matchExpressions:
            - key: environment
              operator: In
              values:
                - production

污点和容忍示例

污点和容忍用于控制 Pod 调度到特定节点。例如，给节点添加污点：

kubectl taint nodes <node-name> dedicated=example:NoSchedule

然后在 Pod 中添加容忍：

tolerations:
  - key: "dedicated"
    operator: "Equal"
    value: "example"
    effect: "NoSchedule"

4.2 优先级和抢占

通过设置 Pod 的优先级，可以在资源紧张时控制 Pod 的调度顺序。高优先级的 Pod 可以抢占低优先级 Pod 的资源。

apiVersion: scheduling.k8s.io/v1
kind: PriorityClass
metadata:
  name: high-priority
value: 1000000
globalDefault: false
description: "This priority class is for high priority Pods."

5. 监控与调整

5.1 监控工具

使用 Prometheus 和 Grafana 等监控工具，实时监控集群资源使用情况。可以根据实际使用情况调整资源请求、限制、配额和策略。

5.2 调整示例

根据监控数据，发现某个命名空间频繁达到配额上限时，可以调整资源配额：

apiVersion: v1
kind: ResourceQuota
metadata:
  name: example-quota
  namespace: example-namespace
spec:
  hard:
    requests.cpu: "4"
    requests.memory: "8Gi"
    limits.cpu: "8"
    limits.memory: "16Gi"
    persistentvolumeclaims: "10"