更新 Amazon EKS 集群 Kubernetes 版本

更新集群的 Kubernetes 版本的步骤

1. 比较集群控制面板的 Kubernetes 版本与节点的 Kubernetes 版本。

   • 使用 kubectl version --short 命令获取集群控制面板的 Kubernetes 版本。

     kubectl version --short

   • 使用 kubectl get nodes 命令获取节点的 Kubernetes 版本。此命令会返回所有自我管理和托管的 Amazon EC2 和 Fargate 节点。每个 Fargate pod 都作为其自身的节点列出。

     kubectl get nodes

   将控制面板升级到新的 Kubernetes 版本之前，确保集群中的托管节点和 Fargate 节点的 Kubernetes 次要版本与控制面板的版本相同。例如，如果您的控制面板正在运行版本 1.22 且您的其中一个节点正在运行版本 1.21，则您必须将节点更新为版本 1.22。我们还建议您，在更新控制层面之前将自我管理节点更新为与控制层面相同的版本。有关更多信息，请参阅 更新托管节点组 和 自行管理节点的更新。要更新 Fargate 节点的版本，请先删除节点所表示的 pod。然后更新您的控制面板。任何剩余的 pods 都将在重新部署之后更新到新版本。

2. 默认情况下，Amazon EKS 集群上会启用 pod 安全策略准入控制器。在升级集群前，请确保已实施适当的 pod 安全策略。这是为了避免潜在的安全问题。您可以使用 kubectl get psp eks.privileged 命令检查默认策略。

   kubectl get psp eks.privileged

   如果您收到以下错误，请参阅默认 pod 安全策略，然后再继续操作。

   Error from server (NotFound): podsecuritypolicies.extensions "eks.privileged" not found

3. 如果您最初部署集群所用的 Kubernetes 版本是 Kubernetes 1.18 或更高版本，请跳过此步骤。

   您可能需要从您的 CoreDNS 清单中删除已停用的术语。

   1. 检查您的 CoreDNS 清单是否有一行仅包含词语 upstream。

      kubectl get configmap coredns -n kube-system -o jsonpath='{$.data.Corefile}' | grep upstream

      如果未返回任何输出，则说明您的清单没有此类行。如果是这样，请跳至下一步。如果返回了词语 upstream，则删除该行。

   2. 删除文件顶部附近在 configmap 文件中仅包含词语 upstream 的行。不要更改文件中的任何其他内容。删除该行后，保存更改。

      kubectl edit configmap coredns -n kube-system -o yaml

   显示更多显示更少

4. 使用 eksctl、Amazon Web Services Management Console 或 Amazon CLI 更新您的集群。

   重要

   • 如果您要更新到版本 1.22，您必须对集群进行 Kubernetes 版本 1.22 的先决条件 中列出的更改，然后再更新它。

   • 如果您要在集群中更新到版本 1.23 并使用 Amazon EBS 卷，请在将集群更新为版本 1.23 之前，在集群中安装 Amazon EBS CSI 驱动程序，避免中断工作负载。有关更多信息，请参阅 Kubernetes 1.23 和 Amazon EBS CSI 驱动程序。

   • 由于 Amazon EKS 运行高度可用的控制层面，您可以一次只更新一个次要版本。有关此要求的更多信息，请参阅 Kubernetes 版本和版本偏差支持策略。假设集群的当前版本为 1.21，而且您想更新到 1.23，则必须先将集群更新为 1.22，再将集群从 1.22 更新到 1.23。

   • 在更新之前，请确保您的托管节点和 Fargate 节点上的 kubelet 与控制面板的 Kubernetes 版本相同。我们建议您将自行管理节点保持在与控制面板相同的版本。它们最多只能比控制面板的当前版本落后一个版本。

   • 如果您的集群配置了早于 1.8.0 的 Amazon VPC CNI 插件版本，那么我们建议您将插件更新为版本 1.11.4，然后再将集群更新为版本 1.21 或更高版本。有关更多信息，请参阅 更新 Amazon VPC CNI plugin for Kubernetes 附加组件 或 更新 Amazon VPC CNI plugin for Kubernetes 自行管理的附加组件。

   eksctl

   此过程需要 eksctl 版本 0.114.0 或更高版本。可以使用以下命令来查看您的版本：

   eksctl version

   有关如何安装或更新 eksctl 的说明，请参阅 安装或更新 eksctl。

   使用以下命令将 Amazon EKS 控制面板的 Kubernetes 版本更新到比当前版本高的一个次要版本。将 my-cluster 替换为您的集群名称。

   eksctl upgrade cluster --name my-cluster --approve

   更新过程可能需要几分钟才能完成。

   Amazon Web Services Management Console

   1. 访问 https://console.aws.amazon.com/eks/home#/clusters 打开 Amazon EKS 控制台。

   2. 选择要更新的 Amazon EKS 集群的名称，然后选择 Update cluster version (更新集群版本)。

   3. 对于 Kubernetes version（版本），选择集群要更新到的版本，然后选择 Update（更新）。

   4. 对于 Cluster name（集群名称），输入您的集群的名称并选择 Confirm（确认）。

      更新过程可能需要几分钟才能完成。

   Amazon CLI

   1. 使用以下 Amazon CLI 命令更新 Amazon EKS 集群。将 example values 替换为您自己的值。

      aws eks update-cluster-version \
       --region region-code \
       --name my-cluster \
       --kubernetes-version 1.23

      输出示例如下。

      {
          "update": {
              "id": "b5f0ba18-9a87-4450-b5a0-825e6e84496f",
              "status": "InProgress",
              "type": "VersionUpdate",
              "params": [
                  {
                      "type": "Version",
                      "value": "1.23"
                  },
                  {
                      "type": "PlatformVersion",
                      "value": "eks.1"
                  }
              ],
      ...
              "errors": []
          }
      }

   2. 使用以下命令监控集群更新的状态。使用上一命令返回的集群名称和更新 ID。当 Successful 状态显示时，更新完成。更新过程可能需要几分钟才能完成。

      aws eks describe-update \
        --region region-code \
        --name my-cluster \
        --update-id b5f0ba18-9a87-4450-b5a0-825e6e84496f

      输出示例如下。

      {
          "update": {
              "id": "b5f0ba18-9a87-4450-b5a0-825e6e84496f",
              "status": "Successful",
              "type": "VersionUpdate",
              "params": [
                  {
                      "type": "Version",
                      "value": "1.23"
                  },
                  {
                      "type": "PlatformVersion",
                      "value": "eks.1"
                  }
              ],
      ...
              "errors": []
          }
      }

5. 集群更新完成后，将节点更新为与已更新的集群相同的 Kubernetes 次要版本。有关更多信息，请参阅 自行管理节点的更新 和 更新托管节点组。在 Fargate 上启动的任何新 pods 都具有与您的集群版本匹配的 kubelet 版本。不会更改现有 Fargate pods。

6. （可选）如果您在更新集群之前将 Kubernetes Cluster Autoscaler 部署到了集群，请将 Cluster Autoscaler 更新为与您升级后的 Kubernetes 主版本和次要版本匹配的最新版本。

   1. 在 Web 浏览器中打开 Cluster Autoscaler 版本页面，找到与您集群的 Kubernetes 主版本和次要版本相匹配的 Cluster Autoscaler 最新版本。例如，如果您集群的 Kubernetes 版本是 1.23，则查找以 1.23 开头的 Cluster Autoscaler 最新版本。记录该版本的语义版本号 (<1.23.n>) 以在下一步中使用。

   2. 使用以下命令，将 Cluster Autoscaler 映像标签设置为您在上一步中记录的版本。如有必要，将 1.23.n 替换为您自己的值。

      kubectl -n kube-system set image deployment.apps/cluster-autoscaler cluster-autoscaler=public.ecr.aws/bitnami/cluster-autoscaler:v1.23.n

7. （仅限于具有 GPU 节点的集群）如果您的集群具有带 GPU 支持的节点组（例如，p3.2xlarge），则您必须使用以下命令在您的集群上更新适用于 Kubernetes 的 NVIDIA 设备插件 DaemonSet。

   kubectl apply -f https://raw.githubusercontent.com/NVIDIA/k8s-device-plugin/v0.9.0/nvidia-device-plugin.yml

8. 更新 Amazon VPC CNI plugin for Kubernetes、CoreDNS 和 kube-proxy 附加组件。如果您将集群更新为版本 1.21 或更新版本，我们建议将附加组件更新为服务账户令牌中列出的最低版本。

   • 如果您正在使用 Amazon EKS 附加组件，请在 Amazon EKS 控制台中选择 Clusters（集群），然后在左侧导航窗格中选择您更新的集群的名称。控制台中显示通知。这些通知将告知您有一个新版本可用于每个具有可用更新的附加组件。要更新附加组件，请选择 Add-ons（附加组件）选项卡。在具有可用更新的附加组件的其中一个框中，选择 Update now（立即更新），选择一个可用版本，然后选择 Update（更新）。

   • 此外，您也可以使用 Amazon CLI 或 eksctl 更新 Amazon VPC CNI plugin for Kubernetes、CoreDNS 和 kube-proxy Amazon EKS 附加组件。