发行说明和文档历史记录

仅文档发布：

• Amazon ParallelCluster 版本 2 有自己的单独用户指南。

错误修复：

• 在进行包括更改 vpc_security_group_id 的集群更新时，防止替换托管的 FSx for Lustre 文件系统并防止数据丢失。

更改：

• 将 Intel MPI Library 升级到 2021 年版更新 6（从 2021 年版更新 4 进行更新）。有关更多信息，请参阅 Intel® MPI Library 2021 更新 6。

• 将 EFA 安装程序升级到 1.19.0

  • Efa-driver：efa-1.16.0-1

  • Efa-config：efa-config-1.11-1（从 efa-config-1.9-1）

  • Efa-profile：efa-profile-1.5-1（无变化）

  • Libfabric-aws：libfabric-aws-1.16.0-1（从 libfabric-1.13.2）

  • Rdma-core：rdma-core-41.0-2（从 rdma-core-37.0）

  • Open MPI：openmpi40-aws-4.1.4-3（从 openmpi40-aws-4.1.1-2）

• 将 Lambda 函数在 Amazon Batch 集成中使用的 Python 运行时升级到 python3.9。

错误修复：

• 防止在更新期间更改集群标签，因为不支持更改。

更改：

• 将 Slurm 升级到版本 20.11.9。

增强功能：

• 改进了网络中断时的异常管理。

更改：

• 操作系统程序包更新和安全修复。

增强功能：

• 作为 FSx for Lustre AutoImportPolicy 选项的值，添加了对 NEW_CHANGED_DELETED 的支持。

• 删除了对 SGE 和 Torque 调度器的支持。

• 在 Amazon Linux 上禁用 log4j-cve-2021-44228-hotpatch 服务以避免引发潜在的性能降低。

更改：

• 将 NVIDIA 驱动程序升级到版本 470.103.01（从 470.82.01）。

• 将 NVIDIA Fabric Manager 升级到版本 470.103.01（从 470.82.01）。

• 将 CUDA 库升级到版本 11.4.4（从 11.4.3）。

• Intel MPI 更新至 2021 年版更新 4（从 2019 年版更新 8 进行更新）。有关更多信息，请参阅 Intel® MPI Library 2021 更新 4。

• 将头节点创建超时时间延长至一小时。

错误修复：

• 修复了通过浏览器进行 DCV 连接的问题。

• 修复了 YAML 引用以防止自定义标签被解析为编号。

• 删除了 CentOS 8 支持。CentOS 8 于 2021 年 12 月 31 日终止服务 (EOL)。

• 将 Slurm Workload Manager 升级到版本 20.11.8。

• 将 Cinc 客户端升级到 17.2.29。

• NICE DCV 更新为 NICE DCV 2021.2-11190。有关更多信息，请参阅 NICE DCV Administrator Guide 中的 DCV 2021.2-11190— October 11, 2021。

• 将 NVIDIA 驱动程序升级到版本 470.82.01（从 460.73.01）。

• 将 CUDA 库升级到版本 11.4.3（从 11.3.0）。

• 将 NVIDIA Fabric Manager 升级到 470.82.01。

• 在 Amazon Linux 2 上禁用实例启动时的程序包更新。

• 在 Ubuntu 和 Amazon Linux 2 上禁用无人值守的程序包更新。

• 在 CentOS 7 和 Ubuntu 18.04 上安装 Amazon CloudFormation 帮助程序脚本的 Python 3 版本。（这些脚本已经在 Amazon Linux 2 和 Ubuntu 20.04 上使用。）

• 禁用 ec2_iam_role 参数更新。

• 修复 T2 实例启动模板中的 CpuOptions 配置。

• 修复由于 Son of Grid Engine 源在 arc.liv.ac.uk 上不可用而导致的 pcluster createami 失败。

将 Elastic Fabric Adapter 安装程序升级到 1.14.1（从 1.13.0）

• EFA 配置：efa-config-1.9-1（从 efa-config-1.9）

• EFA 配置文件：efa-profile-1.5-1（无变化）

• EFA 内核模块：efa-1.14.2（从 efa-1.13.0）

• RDMA 内核：rdma-core-37.0（从 rdma-core-35.0amzn）

• libfabric：libfabric-1.13.2（从 libfabric-1.13.0amzn1.0）

• Open MPI：openmpi40-aws-4.1.1-2（无变化）

如果实例类型支持，则始终启用 GPUDirect RDMA。

• enable_efa_gdr 和 enable_efa_gdr 配置选项没有效果。

• 在启用了 GPUDirect RDMA (GDR) 的情况下，如果在基础 AMI 中安装了 EFA，则引导时不安装 EFA。

• 锁定nvidia-fabricmanager软件包版本以与安装的 NVIDIA 驱动程序版本保持同步 Amazon ParallelCluster。

• Slurm：修复了节点处于开机状态下停止并重启集群时导致的问题。

• Elastic Fabric Adapter 安装程序更新为 1.13.0：

  • EFA 配置：efa-config-1.9（无变化）

  • EFA 配置文件：efa-profile-1.5-1（无变化）

  • EFA 内核模块：efa-1.13.0（无变化）

  • RDMA 内核：rdma-core-35.0amzn（从 rdma-core-32.1amzn）

  • libfabric：libfabric-1.13.0amzn1.0（从 libfabric-1.11.2amzn1.1）

  • Open MPI：openmpi40-aws-4.1.1-2（无变化）

• 将自定义 AMI 与预安装的 EFA 程序包一起使用时，节点引导时不对 EFA 进行任何更改。保留原始 EFA 程序包部署。

• 使用 noatime 挂载选项挂载文件系统以在读取文件时停止记录上次访问时间。这提高了远程文件系统的性能。

• Elastic Fabric Adapter 安装程序更新为 1.12.3：

  • EFA 配置：efa-config-1.9（从 efa-config-1.8-1）

  • EFA 配置文件：efa-profile-1.5-1（无变化）

  • EFA 内核模块：efa-1.13.0（从 efa-1.12.3）

  • RDMA 核心：rdma-core-32.1amzn（无更改）

  • Libfabric：libfabric-1.11.2amzn1.1（无更改）

  • Open MPI：openmpi40-aws-4.1.1-2（无变化）

• Amazon Batch 用作调度程序时，请重试在头节点上安装aws-parallelcluster软件包。

• 在具有超过 31 个 vCPU 的实例类型上构建 SGE 时避免失败。

• 已固定到 A CloudWatch mazon Agent 的 1.247347.6 版本，以避免 1.247348.0 版本中出现的问题。

• 添加了对 Ubuntu 20.04 (ubuntu2004) 的支持，并删除了对 Ubuntu 16.04 (ubuntu1604) 和 Amazon Linux (alinux) 的支持。仍然完全支持 Amazon Linux 2 (alinux2)。有关更多信息，请参阅 base_os。

• 删除了对 3.6 以下 Python 版本的支持。

• 默认根卷大小增加到 35 吉字节 (GiB)。有关更多信息，请参阅 compute_root_volume_size 和 master_root_volume_size。

• Elastic Fabric Adapter 安装程序更新为 1.12.2：

  • EFA 配置：efa-config-1.8-1（从 efa-config-1.7）

  • EFA 配置文件：efa-profile-1.5-1（从 efa-profile-1.4）

  • EFA 内核模块：efa-1.12.3（从 efa-1.10.2）

  • RDMA 内核：rdma-core-32.1amzn（从 rdma-core-31.2amzn）

  • libfabric：libfabric-1.11.2amzn1.1（从 libfabric-1.11.1amzn1.0）

  • Open MPI：openmpi40-aws-4.1.1-2（从 openmpi40-aws-4.1.0）

• 将 Slurm 升级到版本 20.11.7（从 20.02.7）。

• 在 centos7 和 centos8 上安装 SSM 代理。（alinux2、ubuntu1804 和 ubuntu2004 上预安装 SSM 代理。）

• SGE：始终对 qstat 使用短名称作为主机名筛选器。

• 使用实例元数据服务版本 2 (IMDSv2) 而不是实例元数据服务版本 1 (IMDSv1) 来检索实例元数据。有关更多信息，请参阅《Amazon EC2 用户指南》中的实例元数据和用户数据。

• 将 NVIDIA 驱动程序升级到版本 460.73.01（从 450.80.02）。

• 将 CUDA 库升级到版本 11.3.0（从 11.0）。

• 将 NVIDIA Fabric Manager 升级到 nvidia-fabricmanager-460。

• 将 v Amazon ParallelCluster irtualenvs 中使用的 Python 升级到3.7.10（从3.6.13）。

• 将 Cinc 客户端升级到 16.13.16。

• 升级 aws-parallelcluster-cookbook 的第三方依赖项：

  • apt-7.4.0（从 apt-7.3.0）。

  • iptables-8.0.0（从 iptables-7.1.0）。

  • line-4.0.1（从 line-2.9.0）。

  • openssh-2.9.1（从 openssh-2.8.1）。

  • pyenv-3.4.2（从 pyenv-3.1.1）。

  • selinux-3.1.1（从 selinux-2.1.1）。

  • ulimit-1.1.1（从 ulimit-1.0.0）。

  • yum-6.1.1（从 yum-5.1.0）。

  • yum-epel-4.1.2（从 yum-epel-3.3.0）。

• 将 Slurm 升级到版本 20.02.7（从 20.02.4）。

• 在中国基于 ARM 的 Amazon Graviton 实例上增加了对 Ubuntu 18.04 和 Amazon Linux 2 的支持。 Amazon Amazon GovCloud (US) Amazon Web Services 区域

• Elastic Fabric Adapter 安装程序更新为 1.11.2：

  • EFA 配置：efa-config-1.7（无变化）

  • EFA 配置文件：efa-profile-1.4（从 efa-profile-1.3）

  • EFA 内核模块：efa-1.10.2（无变化）

  • RDMA 核心：rdma-core-31.2amzn（无更改）

  • Libfabric：libfabric-1.11.1amzn1.0（无更改）

  • Open MPI：openmpi40-aws-4.1.0（无变化）

• 改进集群配置验证，以便在--dry-run模式下调用 Amazon EC2 RunInstancesAPI 操作时使用集群目标 AMI。

• 将 Amazon ParallelCluster 虚拟环境中使用的 Python 版本更新到 3.6.13。

• 修复了 Arm 实例类型的 sanity_check。

• 修复了将 centos8 与 Slurm 调度器或 Arm 实例类型一起使用时的 enable_efa。

• 在非交互模式 (-y) 下运行 apt update。

• 对 alinux2 和 centos8 修复了 encrypted_ephemeral = true。

• 增加了对非洲（开普敦）(af-south-1)、欧洲（米兰）（me-south-1）和中东（巴林）（me-south-1）的支持 Amazon Web Services 区域。在发布时，支持受到以下限制：

  • 在其中的任何 Amazon Web Services 区域中不支持 FSx for Lustre 和基于 ARM 的 Graviton 实例。

  • Amazon Batch 在非洲（开普敦）不支持。

  • 非洲（开普敦）io2和欧洲（米兰） Amazon Web Services 区域不支持 Amazon EBS 和gp3卷类型。

• 添加了对 Amazon EBS io2 和 gp3 卷类型的支持。有关更多信息，请参阅 [ebs] 部分和 [raid] 部分。

• 在运行 alinux2、ubuntu1804 或 ubuntu2004 的基于 Arm 的 Graviton2 实例上添加了对 Elastic Fabric Adapter 的支持。有关更多信息，请参阅 Elastic Fabric Adapter。

• 在 Arm AMI（alinux2、centos8 和 ubuntu1804）上安装 Arm Performance Libraries 20.2.1。有关更多信息，请参阅 Arm Performance Libraries。

• Intel MPI 更新至 2019 年版更新 8（从 2019 年版更新 7 进行更新）。有关更多信息，请参阅 Intel® MPI Library 2019 更新 8。

• 从 Amazon Batch Docker 入口点移除了 Amazon CloudFormation DescribeStacks API 操作调用，以结束因限制而导致的作业失败。 Amazon CloudFormation

• 改进了验证集群配置时对 Amazon EC2 DescribeInstanceTypes API 操作调用的调用。

• 构建 awsbatch 调度器的 Docker 映像时，从 Amazon ECR Public 拉取 Amazon Linux 2 Docker 映像。

• 的默认实例类型从硬编码t2.micro实例类型更改为免费套餐实例类型 Amazon Web Services 区域 （t2.micro或t3.micro，视情况而定 Amazon Web Services 区域）。 Amazon Web Services 区域 没有免费套餐的t3.micro实例类型默认。

• Elastic Fabric Adapter 安装程序更新为 1.11.1：

  • EFA 配置：efa-config-1.7（从 efa-config-1.5）

  • EFA 配置文件：efa-profile-1.3（从 efa-profile-1.1）

  • EFA 内核模块：efa-1.10.2（无变化）

  • RDMA 内核：rdma-core-31.2amzn（从 rdma-core-31.amzn0）

  • libfabric：libfabric-1.11.1amzn1.0（从 libfabric-1.10.1amzn1.1）

  • Open MPI：openmpi40-aws-4.1.0（从 openmpi40-aws-4.0.5）

• vpc_settings、vpc_id 和 master_subnet_id 参数现在是必需参数。

• 头节点中的 nfsd 进程守护程序现在设置为使用至少 8 个线程。如果内核超过 8 个，它将使用与内核数量一样多的线程。使用 ubuntu1604 时，该设置仅在节点重启后才会更改。

• NICE DCV 更新为 NICE DCV 2020.2-9662。有关更多信息，请参阅 NICE DCV Administrator Guide 中的 DCV 2020.2-9662— December 04, 2020。

• 的英特尔 MPI 和 HPC 软件包来自亚马逊 S3。 Amazon ParallelCluster 不再从 Intel yum 存储库中拉取。

• 在创建官方 Amazon ParallelCluster AMI 期间，将multi-user.target所有操作系统的默认systemd运行级别更改为。仅当启用了 DCV 时，头节点上的运行级别才会设置为 graphical.target。这样可以防止图形服务（例如 x/gdm）在不需要时运行。

• 在头节点上启用了对 p4d.24xlarge 实例的支持。

• 增加了在 Amazon Route 53 中注册 Slurm 节点时的最大重试次数。

• 在所有 Amazon Web Services 区域 （ Amazon 中国和 Amazon GovCloud （美国）地区以外的地区）增加了对 CentOS 8 的支持。删除了对 CentOS 6 的支持。

• 为计算节点添加了对 p4d.24xlarge 实例的支持。

• 通过使用新的 enable_efa_gdr 设置，在 EFA 上添加了对 NVIDIA GPUDirect RDMA 的支持。

• 增加了对适用于 Lustre 的 Amazon FSx 功能的支持。

  • 将适用于 Lustre 的 Amazon FSx 文件系统配置为使用 auto_import_policy 设置导入首选项。

  • 使用 storage_type 和 drive_cache_type 设置添加了对基于 HDD 的适用于 Lustre 的 Amazon FSx 文件系统的支持。

• 添加了 Amazon CloudWatch 控制面板，包括头节点指标和轻松访问集群日志。有关更多信息，请参阅 亚马逊 CloudWatch 控制面板。

• 使用 cluster_resource_bucket 设置，添加了对使用现有 Amazon S3 存储桶存储集群配置信息的支持。

• 增强了 pcluster createami 命令。

  • 添加了在构建 AMI 时使用安装后脚本的 --post-install 参数。

  • 添加了一个验证步骤，当使用由不同版本的创建的基本 AMI 时，验证步骤会失败 Amazon ParallelCluster。

  • 添加了一个验证步骤，如果所选操作系统与基础 AMI 中的操作系统不同时，该验证步骤将会失败。

  • 增加了对使用 Amazon ParallelCluster 基本 AMI 的支持。

• 增强了 pcluster update 命令。

  • 现在可以在更新期间更改 tags 设置。

  • 现在可以在更新期间调整队列的大小，而无需停止计算实例集

• 为 slurm_resume 脚本添加了 all_or_nothing_batch 配置参数。如果为 True，则只有当 Slurm 中的所有待处理作业所需的所有实例都可用时，slurm_resume 才会成功。如需了解更多信息，请参阅上的 Amazon ParallelCluster Wiki 中的all_or_nothing_batch产品发布简介 GitHub。

• Elastic Fabric Adapter 安装程序更新为 1.10.1：

  • EFA 配置：efa-config-1.5（从 efa-config-1.4）

  • EFA 配置文件：efa-profile-1.1（从 efa-profile-1.0.0）

  • EFA 内核模块：efa-1.10.2（从 efa-1.6.0）

  • RDMA 内核：rdma-core-31.amzn0（从 rdma-core-28.amzn0）

  • libfabric：libfabric-1.11.1amzn1.0（从 libfabric-1.10.1amzn1.1）

  • Open MPI：openmpi40-aws-4.0.5（从 openmpi40-aws-4.0.3）

• 在 Amazon GovCloud (US) 区域中，启用对 NICE DCV 的支持和。 Amazon Batch

• Amazon 在中国区域，启用对亚马逊 FSx for Lustre 的支持。

• 将 NVIDIA 驱动程序升级到版本 450.80.02（从 450.51.05）。

• 安装 NVIDIA Fabric Manager 以在支持的平台上启用 NVIDIA NVSwitch。

• 移除了默认值 Amazon Web Services 区域 us-east-1。默认值使用以下查找顺序。

  • Amazon Web Services 区域 在-r或--region参数中指定。

  • AWS_DEFAULT_REGION 环境变量。

  • aws_region_name在 Amazon ParallelCluster 配置文件[aws]部分中设置（默认为~/.parallelcluster/config）。

  • region在 Amazon CLI 配置文件[default]部分中设置（默认为~/aws/config）。

• 与 Slurm Workload Manager 一起使用时，添加了对计算实例集中的多个队列和多种实例类型的支持。使用队列时，Slurm 上将不再使用自动扩缩组。当使用 Slurm 调度器时，现在会随集群一起创建 Amazon Route 53 托管区，并对计算节点的 DNS 解析使用这些托管区。有关更多信息，请参阅 多队列模式。

• 在基于 ARM Amazon 的 Graviton 实例上增加了对 NICE DCV 的支持。

• 添加了对在不支持启动模板中 CPU 选项的实例类型（例如 *.metal 实例类型）上禁用超线程的支持。

• 为从头节点共享的文件系统添加了对 NFS 4 的支持。

• 移除了在引导计算节点时对 cfn-in it 的依赖，以避免在大量节点加入集群 Amazon CloudFormation 时受到限制。

• Elastic Fabric Adapter 安装程序更新为 1.9.5：

  • EFA 配置：efa-config-1.4（从 efa-config-1.3）

  • EFA 配置文件：efa-profile-1.0.0（新）

  • 内核模块：efa-1.6.0（无更改）

  • RDMA 核心：rdma-core-28.amzn0（无更改）

  • Libfabric：libfabric-1.10.1amzn1.1（无更改）

  • Open MPI：openmpi40-aws-4.0.3（无变化）

• 将 Slurm 升级到版本 20.02.4（从 19.05.5）。

• NICE DCV 更新为 NICE DCV 2020.1-9012。有关更多信息，请参阅 NICE DCV Administrator Guide 中的 DCV 2020.1-9012— August 24, 2020 Release Notes。

• 挂载共享 NFS 驱动器时，使用头节点私有 IP 地址而不是主机名。

• 在 Logs 中添加了新的 CloudWatch 日志流：chef-clientclustermgtdcomputemgtd、slurm_resume、、和slurm_suspend。

• 在预安装和安装后脚本中添加了对队列名称的支持。

• 在中 Amazon GovCloud (US) Amazon Web Services 区域，使用亚马逊 DynamoDB 按需计费选项。有关更多信息，请参阅 Amazon DynamoDB 开发人员指南 中的按需模式。

• 禁用 NICE DCV 会话的屏幕锁定，以防止用户被锁定。

• 修复了包含基于 ARM 的 Amazon Graviton 实例类型时的 pcluster configure。

• 增加了对基于 ARM 的基于 Amazon Graviton 的实例（如和）的支持。A1 C6g

• 添加了对适用于 Lustre 的 Amazon FSx 的每日自动备份功能的支持。有关更多信息，请参阅 automatic_backup_retention_days、copy_tags_to_backups、daily_automatic_backup_start_time 和 fsx_backup_id。

• 从 pcluster createami 中删除了对 Berkshelf 的依赖。

• 改进了 pcluster update 的可靠性和用户体验。有关更多信息，请参阅 使用 pcluster update。

• Elastic Fabric Adapter 安装程序更新为 1.9.4：

  • 内核模块：efa-1.6.0（从 efa-1.5.1 进行更新）

  • RDMA 内核：rdma-core-28.amzn0（从 rdma-core-25.0 进行更新）

  • Libfabric：libfabric-1.10.1amzn1.1（从 libfabric-aws-1.9.0amzn1.1 进行更新）

  • Open MPI：openmpi40-aws-4.0.3（无变化）

• 在 CentOS 6 上将 NVIDIA 驱动程序升级到 Tesla 版本 440.95.01，在所有其他分发上升级到版本 450.51.05。

• 在除 CentOS 6 以外的所有分发上将 CUDA 库升级到版本 11.0。

• base_os 现在是必需的参数。

• scheduler 现在是必需的参数。

• NICE DCV 更新为 NICE DCV 2020.0。有关更多信息，请参阅 NICE DCV 推出支持 7.1 环绕立体声和触控笔的 2020.0 版本。

  Intel MPI 更新至 2019 年版更新 7（从 2019 年版更新 6 进行更新）。有关更多信息，请参阅 Intel® MPI 库 2019 更新 7。

  Elastic Fabric Adapter 安装程序更新为 1.8.4：

  • 内核模块：efa-1.5.1（无更改）

  • RDMA 核心：rdma-core-25.0（无更改）

  • Libfabric：libfabric-aws-1.9.0amzn1.1（无更改）

  • Open MPI：openmpi40-aws-4.0.3（从 openmpi40-aws-4.0.2 进行更新）

• 将 CentOS 7 AMI 升级到版本 7.8-2003（从 7.7-1908 进行更新）。有关更多信息，请参阅 CentOS-7 (2003) 发行说明。

• 已cfn-wire从存储在 Amazon 日志中的 CloudWatch 日志中移除cfn-init-cmd和。有关更多信息，请参阅 与 Amazon CloudWatch 日志集成。

• 添加了对 Amazon Linux 2 的支持

• 现在，Amazon CloudWatch Logs 用于收集集群和计划程序日志。有关更多信息，请参阅 与 Amazon CloudWatch 日志集成。

• 添加了对新的适用于 Lustre 的 Amazon FSx 部署类型 SCRATCH_2 和 PERSISTENT_1 的支持。在 Ubuntu 18.04 和 Ubuntu 16.04 上支持 FSx for Lustre。有关更多信息，请参阅 fsx。

• 在 Ubuntu 18.04 上添加了对 NICE DCV 的支持。有关更多信息，请参阅 通过 NICE DCV 连接到头节点。