控制 Azure Kubernetes Fleet Manager 群集资源放置的逐出和中断

适用于: ✔️具有中心群集的 Fleet Manager

使用 Fleet Manager 群集资源放置(CRP)的管理员可能需要删除以前放置在成员群集上的资源。 他们还需要确保不会影响关键资源的放置。

本文介绍如何使用 Fleet Manager 的 ClusterResourcePlacementEviction 和 ClusterResourcePlacementDisruptionBudget 对象来实现这些目标。

Note

如果不熟悉 Fleet Manager 的群集资源放置(CRP),请在阅读本文之前阅读 资源放置的概念性概述 。

驱逐已放置的资源

从舰队管理器中心群集传播资源后,使用 ClusterResourcePlacementEviction 对象从成员群集中移除资源。

若要成功从群集中逐出资源,需要指定:

  • 将资源传播到目标群集的对象的名称 ClusterResourcePlacement 。
  • 需要从中逐出资源的目标群集的名称。

逐出可用于群集资源放置的 PickAll 和 PickN 策略。 PickedFixed 不受支持,因为可以编辑目标群集并重新应用 CRP。

Note

逐出不保证资源不会再次由机队计划程序传播到成员群集。 需要应用污点来防止舰队计划程序再次选取特定群集。

请考虑以下 CRP 示例。

apiVersion: placement.kubernetes-fleet.io/v1
kind: ClusterResourcePlacement
metadata:
  name: crp-app-sample
spec:
  resourceSelectors:
    - group: ""
      kind: Namespace
      name: test-namespace
      version: v1
  policy:
    placementType: PickN
    numberOfClusters: 2
    affinity:
      clusterAffinity:
        requiredDuringSchedulingIgnoredDuringExecution:
          clusterSelectorTerms:
            - labelSelector:
                matchLabels:
                  fleet.azure.com/location: chinanorth3

应用此 CRP 后,我们可以 检查放置状态 以确定资源部署到的群集。

假设选择了名为member-cluster-01和member-cluster-02的两个群集,并且我们确定不希望在member-cluster-02上部署资源,因此我们希望将其删除。

  1. 创建 NoSchedule 污点来阻止成员群集的放置请求。 可以阅读污点文档,了解有关使用污点的更多信息。

    apiVersion: placement.kubernetes-fleet.io/v1
    kind: MemberCluster
    metadata:
      name: member-cluster-02
    spec:
      identity:
        name: fleet-member-agent-cluster-2
        kind: ServiceAccount
        namespace: fleet-system
        apiGroup: ""
      taints:                   
        - key: any-key
          value: any-value
          effect: NoSchedule
    
  2. 接下来,创建并应用一个 ClusterResourcePlacementEviction。

    apiVersion: placement.kubernetes-fleet.io/v1
    kind: ClusterResourcePlacementEviction
    metadata:
      name: eviction-sample
    spec:
      placementName: crp-app-sample
      clusterName: member-cluster-02
    
  3. 检查是否已从 member-cluster-02 群集中删除指定的资源:

    kubectl get crpe eviction-sample
    

    这会产生以下输出,其中 EXECUTED 显示 True。

    NAME            VALID   EXECUTED
    test-eviction   True    True 
    

了解如何强制从群集中删除放置的资源后,让我们了解如何保护关键资源免受逐出。

防止逐出

该 ClusterResourcePlacementDisruptionBudget 对象可防止将 ClusterResourcePlacementEviction 对象应用于已放置的资源时发生的主动中断。 它不会防止 非自发性中断。

对于本文前面所示的示例群集资源放置,可以定义放置中断预算对象,如下所示。

中断预算的名称必须与 CRP 匹配。

apiVersion: placement.kubernetes-fleet.io/v1
kind: ClusterResourcePlacementDisruptionBudget
metadata:
  name: crp-app-sample
spec:
  minAvailable: 1

在规范中指定以下两个互斥字段之一:

  • maxUnavailable: 由于任何形式的中断,placement 可能不可用的最大集群数。
  • minAvailable: 尽管出现任何形式的中断,但可用的放置的最小群集数。

这两个字段可以是整数形式的集群绝对数,也可以是舰队中集群总数的百分比。

指定特定 ClusterResourcePlacement 策略的中断预算时,请参阅以下支持矩阵:

CRP 策略 minAvailable (整数) minAvailable (%) maxUnavailable (整数) MaxUnavailable (%)
PickFixed ❌ ❌ ❌ ❌
PickAll ✅ ❌ ❌ ❌
PickN ✅ ✅ ✅ ✅

Note

如果为放置创建无效的中断预算对象,则任何逐出尝试都失败。

验证是否阻止逐出

检查已配置的 Pod 中断预算(PDB)是否阻止了逐出。

kubectl get crpe eviction-sample

该 EXECUTED 字段显示 False,这意味着未应用逐出。

NAME            VALID   EXECUTED
test-eviction   True    False

若要确认中断预算阻止了逐出,请运行相同的 kubectl 命令并添加 -o yaml。 message 值显示中断预算阻止了逐出。

status:
  conditions:
  - lastTransitionTime: "2025-01-21T15:52:29Z"
    message: Eviction is valid
    observedGeneration: 1
    reason: ClusterResourcePlacementEvictionValid
    status: "True"
    type: Valid
  - lastTransitionTime: "2025-01-21T15:52:29Z"
    message: 'Eviction is blocked by specified ClusterResourcePlacementDisruptionBudget,
      availablePlacements: 1, totalPlacements: 1'
    observedGeneration: 1
    reason: ClusterResourcePlacementEvictionNotExecuted
    status: "False"
    type: Executed

非自愿中断

部署位置中断预算 无法防范非自愿中断。 非自愿中断的示例包括:

  • 由于计划策略更改,Fleet Manager 计划程序会从成员群集中删除资源。
  • 手动删除成员群集上运行的工作负荷资源(而不是通过逐出或更新的 CRP)。
  • 手动删除一个 ClusterResourceBinding 对象,该对象是表示资源在成员群集上放置的内部资源。
  • 由于配置错误或群集相关问题,工作负荷在成员群集上运行不正确。

后续步骤