发行说明和文档历史记录

仅文档发布：

• Amazon ParallelCluster 版本 2 有自己的单独用户指南。

错误修复：

• 防止替换托管FSx的 Lustre 文件系统，防止群集更新中包含更改vpc_security_group_id的数据丢失。

更改：

• 将英特尔MPI库升级到 2021 版更新 6（从 2021 版更新 4 更新）。有关更多信息，请参阅英特尔® MPI 库 2021 年更新 6。

• 将EFA安装程序升级到 1.19.0

  • Efa-driver：efa-1.16.0-1

  • Efa-config：efa-config-1.11-1（从 efa-config-1.9-1）

  • Efa-profile：efa-profile-1.5-1（无变化）

  • Libfabric-aws：libfabric-aws-1.16.0-1（从 libfabric-1.13.2）

  • Rdma-core：rdma-core-41.0-2（从 rdma-core-37.0）

  • 打开MPI：openmpi40-aws-4.1.4-3（从openmpi40-aws-4.1.1-2）

• 将 Lambda 函数在 Amazon Batch 集成中使用的 Python 运行时升级到 python3.9。

错误修复：

• 防止在更新期间更改集群标签，因为不支持更改。

更改：

• 将 Slurm 升级到版本 20.11.9。

增强功能：

• 改进了网络中断时的异常管理。

更改：

• 操作系统程序包更新和安全修复。

增强功能：

• 为 Lustre AutoImportPolicy 选项添加FSx对NEW_CHANGED_DELETED作为值的支持。

• 移除对SGE和 Torque 调度器的支持。

• 在 Amazon Linux 上禁用 log4j-cve-2021-44228-hotpatch 服务以避免引发潜在的性能降低。

更改：

• 将NVIDIA驱动程序升级到版本470.103.01（从470.82.01）。

• 将NVIDIA结构管理器升级到版本470.103.01（从470.82.01）。

• 将CUDA库升级到版本11.4.4（从11.4.3）。

• 英特尔MPI已更新至 2021 版更新 4（从 2019 年版本更新 8 更新）。有关更多信息，请参阅英特尔® MPI 库 2021 年更新 4。

• 将头节点创建超时时间延长至一小时。

错误修复：

• 修复通过浏览器的DCV连接。

• 修复YAML引号以防止自定义标签被解析为数字。

• CentOS 已移除 8 支撑。CentOS 8 将于 2021 年 12 月 31 日达到生命尽头 (EOL)。

• Upgrade Slurm Workload Manager 到版本 20.11.8。

• 将 Cinc 客户端升级到 17.2.29。

• 亚马逊DCV已更新至亚马逊 DCV 2021.2-11190。有关更多信息，请参阅《亚马逊管理员指南》中的 DCV 2021.2-11190 — 2021 年 10 月 11 日。DCV

• 将NVIDIA驱动程序升级到版本470.82.01（从460.73.01）。

• 将CUDA库升级到版本11.4.3（从11.3.0）。

• 将NVIDIA结构管理器升级到470.82.01。

• 在 Amazon Linux 2 上禁用实例启动时的程序包更新。

• 禁用无人值守的包裹更新 Ubuntu 还有亚马逊 Linux 2。

• 在上安装 Python 3 版本的Amazon CloudFormation 帮助脚本 CentOS 7 和 Ubuntu 18.04。（它们已经在亚马逊 Linux 2 上使用过 Ubuntu 20.04。)

• 禁用 ec2_iam_role 参数更新。

• 修复启动模板中的CpuOptions配置 T2 实例。

• 修复由于以下原因导致的pcluster createami失败 Son of Grid Engine 消息来源不在网址上arc.liv.ac.uk。

将 Elastic Fabric Adapter 安装程序升级到 1.14.1（从 1.13.0）

• EFA配置:efa-config-1.9-1（来自efa-config-1.9）

• EFA个人资料:efa-profile-1.5-1（无变化）

• EFA内核模块：efa-1.14.2（来自efa-1.13.0）

• RDMA核心：rdma-core-37.0（来自rdma-core-35.0amzn）

• libfabric：libfabric-1.13.2（从 libfabric-1.13.0amzn1.0）

• 打开MPI：openmpi40-aws-4.1.1-2（无变化）

GPUDirectRDMA如果实例类型支持，则始终处于启用状态。

• enable_efa_gdr 和 enable_efa_gdr 配置选项没有效果。

• 如果EFA安装EFA在基础AMI版中，则不要在引导时启用 GPUDirect RDMA (GDR) 的情况下进行安装。

• 锁定nvidia-fabricmanager软件包版本以与安装的NVIDIA驱动程序版本保持同步 Amazon ParallelCluster。

• Slurm：修复了节点处于开机状态下停止并重启集群时导致的问题。

• Elastic Fabric Adapter 安装程序更新为 1.13.0：

  • EFA配置:efa-config-1.9（没有变化）

  • EFA个人资料:efa-profile-1.5-1（无变化）

  • EFA内核模块:efa-1.13.0（无变化）

  • RDMA核心：rdma-core-35.0amzn（来自rdma-core-32.1amzn）

  • libfabric：libfabric-1.13.0amzn1.0（从 libfabric-1.11.2amzn1.1）

  • 打开MPI：openmpi40-aws-4.1.1-2（无变化）

• 使用AMI带有预装EFA软件包的自定义软件包时，EFA在节点引导时不会进行任何更改。保留原始EFA软件包部署。

• 使用 noatime 挂载选项挂载文件系统以在读取文件时停止记录上次访问时间。这提高了远程文件系统的性能。

• Elastic Fabric Adapter 安装程序更新为 1.12.3：

  • EFA配置:efa-config-1.9（来自efa-config-1.8-1）

  • EFA个人资料:efa-profile-1.5-1（无变化）

  • EFA内核模块：efa-1.13.0（来自efa-1.12.3）

  • RDMA核心:rdma-core-32.1amzn（无变化）

  • Libfabric：libfabric-1.11.2amzn1.1（无更改）

  • 打开MPI：openmpi40-aws-4.1.1-2（无变化）

• Amazon Batch 用作调度程序时，请重试在头节点上安装aws-parallelcluster软件包。

• 建造时避免故障 SGE 在超过 31 的实例类型上vCPUs。

• 已固定到 A CloudWatch mazon Agent 的 1.247347.6 版本，以避免 1.247348.0 版本中出现的问题。

• 添加了对以下内容的支持 Ubuntu 20.04 (ubuntu2004) 并删除了对的支持 Ubuntu 16.04 (ubuntu1604) 和亚马逊 Linux (alinux)。仍然完全支持 Amazon Linux 2 (alinux2)。有关更多信息，请参阅 base_os。

• 删除了对 3.6 以下 Python 版本的支持。

• 默认根卷大小增加到 35 吉字节 (GiB)。有关更多信息，请参阅compute_root_volume_size 和master_root_volume_size。

• Elastic Fabric Adapter 安装程序更新为 1.12.2：

  • EFA配置:efa-config-1.8-1（来自efa-config-1.7）

  • EFA个人资料:efa-profile-1.5-1（来自efa-profile-1.4）

  • EFA内核模块：efa-1.12.3（来自efa-1.10.2）

  • RDMA核心：rdma-core-32.1amzn（来自rdma-core-31.2amzn）

  • libfabric：libfabric-1.11.2amzn1.1（从 libfabric-1.11.1amzn1.0）

  • 打开MPI：openmpi40-aws-4.1.1-2（从openmpi40-aws-4.1.0）

• 已升级 Slurm 到版本20.11.7（从20.02.7）。

• 在centos7和上安装SSM代理centos8。（SSM代理已预安装在alinux2ubuntu1804、和ubuntu2004。）

• SGE: 请务必使用短名称作为主机名过滤器。qstat

• 使用实例元数据服务版本 2 (IMDSv2) 而不是实例元数据服务版本 1 (IMDSv1) 来检索实例元数据。有关更多信息，请参阅 Amazon 用户指南中的实例元数据和EC2用户数据。

• 将NVIDIA驱动程序升级到版本460.73.01（从450.80.02）。

• 将CUDA库升级到版本11.3.0（从11.0）。

• 将NVIDIA结构管理器升级到nvidia-fabricmanager-460。

• 将 v Amazon ParallelCluster irtualenvs 中使用的 Python 升级到3.7.10（从3.6.13）。

• 将 Cinc 客户端升级到 16.13.16。

• 升级以下第三方依赖项 aws-parallelcluster-cookbook：

  • apt-7.4.0（从 apt-7.3.0）。

  • iptables-8.0.0（从 iptables-7.1.0）。

  • line-4.0.1（从 line-2.9.0）。

  • openssh-2.9.1（从 openssh-2.8.1）。

  • pyenv-3.4.2（从 pyenv-3.1.1）。

  • selinux-3.1.1（从 selinux-2.1.1）。

  • ulimit-1.1.1（从 ulimit-1.0.0）。

  • yum-6.1.1（从 yum-5.1.0）。

  • yum-epel-4.1.2（从 yum-epel-3.3.0）。

• 已升级 Slurm 到版本20.02.7（从20.02.4）。

• 添加了对以下内容的支持 Ubuntu 18.04 和 Amazon Linux 2 在中国基于 ARM 的 Amazon Graviton 实例上以及。 Amazon Amazon GovCloud (US) Amazon Web Services 区域

• Elastic Fabric Adapter 安装程序更新为 1.11.2：

  • EFA配置:efa-config-1.7（没有变化）

  • EFA个人资料:efa-profile-1.4（来自efa-profile-1.3）

  • EFA内核模块:efa-1.10.2（无变化）

  • RDMA核心:rdma-core-31.2amzn（无变化）

  • Libfabric：libfabric-1.11.1amzn1.0（无更改）

  • 打开MPI：openmpi40-aws-4.1.0（无变化）

• 改进集群配置验证，以便在--dry-run模式下调用 Amazon EC2 RunInstancesAPI操作AMI时使用集群目标。

• 将 Amazon ParallelCluster 虚拟环境中使用的 Python 版本更新到 3.6.13。

• 修复了 Arm 实例类型的 sanity_check。

• centos8与一起使用enable_efa时已修复 Slurm 调度器或 Arm 实例类型。

• 在非交互模式 (-y) 下运行 apt update。

• 对 alinux2 和 centos8 修复了 encrypted_ephemeral = true。

• 增加了对非洲（开普敦）(af-south-1)、欧洲（米兰）（me-south-1）和中东（巴林）（me-south-1）的支持 Amazon Web Services 区域。在发布时，支持受到以下限制：

  • FSx其中任何一个都不支持基于 Lustre 和基于 ARM 的 Graviton 实例。 Amazon Web Services 区域

  • Amazon Batch 在非洲（开普敦）不支持。

  • 非洲（开普敦）EBSio2和欧洲（米兰）不支持 Amazon 和gp3卷类型 Amazon Web Services 区域。

• 增加了对 Amazon EBS io2 和gp3卷类型的支持。有关更多信息，请参阅 [ebs] 部分和 [raid] 部分。

• 在运行 alinux2、ubuntu1804 或 ubuntu2004 的基于 Arm 的 Graviton2 实例上添加了对 Elastic Fabric Adapter 的支持。有关更多信息，请参阅 Elastic Fabric Adapter。

• 在 ArmAMIs（alinux2、centos8和ubuntu1804）上安装 Arm 性能库 20.2.1。有关更多信息，请参阅 Arm Performance Libraries。

• 英特尔MPI已更新至 2019 版更新 8（从 2019 年版本更新 7 更新）。有关更多信息，请参阅英特尔® MPI 库 2019 年更新 8。

• 从 Amazon Batch Docker 入口点移除了 Amazon CloudFormation DescribeStacksAPI操作调用，以结束因限制而导致的作业失败。 Amazon CloudFormation

• 改进了验证集群配置时EC2DescribeInstanceTypesAPI对 Amazon 操作调用的调用。

• Amazon Linux 2 Docker 镜像是在为调度程序构建 Docker 镜像时从亚马逊ECR公共镜像中提取的。awsbatch

• 的默认实例类型从硬编码t2.micro实例类型更改为免费套餐实例类型 Amazon Web Services 区域 （t2.micro或t3.micro，视情况而定 Amazon Web Services 区域）。 Amazon Web Services 区域 没有免费套餐的t3.micro实例类型默认。

• Elastic Fabric Adapter 安装程序更新为 1.11.1：

  • EFA配置:efa-config-1.7（来自efa-config-1.5）

  • EFA个人资料:efa-profile-1.3（来自efa-profile-1.1）

  • EFA内核模块:efa-1.10.2（无变化）

  • RDMA核心：rdma-core-31.2amzn（来自rdma-core-31.amzn0）

  • libfabric：libfabric-1.11.1amzn1.0（从 libfabric-1.10.1amzn1.1）

  • 打开MPI：openmpi40-aws-4.1.0（从openmpi40-aws-4.0.5）

• vpc_settings、vpc_id 和 master_subnet_id 参数现在是必需参数。

• 头节点中的 nfsd 进程守护程序现在设置为使用至少 8 个线程。如果内核超过 8 个，它将使用与内核数量一样多的线程。使用 ubuntu1604 时，该设置仅在节点重启后才会更改。

• 亚马逊DCV已更新为亚马逊 DCV 2020.2-9662。有关更多信息，请参阅《亚马逊管理员指南》中的 DCV 2020.2-9662 — 2020 年 12 月 4 日。DCV

• 英特尔MPI和的HPC软件包 Amazon ParallelCluster 是从 Amazon S3 中提取的。不再从 Intel yum 存储库中拉取。

• 更改了默认值 systemd multi-user.target在创建官方 Amazon ParallelCluster AMIs版本OSs期间，全部运行等级。仅当启用时，头节点graphical.target上的运行级别才会设置DCV为。这样可以防止图形服务（例如 x/gdm）在不需要时运行。

• 在头节点上启用了对 p4d.24xlarge 实例的支持。

• 增加注册时的最大重试次数 Slurm 亚马逊 Route 53 中的节点。

• 添加了对以下内容的支持 CentOS 总共有 8 个 Amazon Web Services 区域 （ Amazon 中国和 Amazon GovCloud （美国）地区以外）。已移除对的支持 CentOS 6.

• 为计算节点添加了对 p4d.24xlarge 实例的支持。

• 使用新enable_efa_gdr设置添加NVIDIAGPUDirectRDMAEFA了对开启的支持。

• 增加了对 Amazon for Lustre 功能FSx的支持。

  • 使用该设置将您FSx的 Amazon for Lustre 文件系统配置为导入首选项。auto_import_policy

  • 使用和drive_cache_type设置增加了对HDD基FSx于 Amazon for Lustre 文件系统的支持。storage_type

• 添加了 Amazon CloudWatch 控制面板，包括头节点指标和轻松访问集群日志。有关更多信息，请参阅 亚马逊 CloudWatch 控制面板。

• 使用 cluster_resource_bucket 设置，添加了对使用现有 Amazon S3 存储桶存储集群配置信息的支持。

• 增强了 pcluster createami 命令。

  • 添加了在构建时使用安装后脚本的--post-installAMI参数。

  • 添加了一个验证步骤，当使用由不同版本的AMI创建的基础时，验证步骤会失败 Amazon ParallelCluster。

  • 添加了一个验证步骤，当所选操作系统与基础操作系统不同时，验证步骤将失败AMI。

  • 增加了对使用 Amazon ParallelCluster 底座的支持AMI。

• 增强了 pcluster update 命令。

  • 现在可以在更新期间更改 tags 设置。

  • 现在可以在更新期间调整队列的大小，而无需停止计算实例集

• 为 slurm_resume 脚本添加了 all_or_nothing_batch 配置参数。何时True，仅当中所有待处理任务所需的所有实例都满足时，才slurm_resume会成功 Slurm 将可用。如需了解更多信息，请参阅上的 Amazon ParallelCluster Wiki 中的all_or_nothing_batch产品发布简介 GitHub。

• Elastic Fabric Adapter 安装程序更新为 1.10.1：

  • EFA配置:efa-config-1.5（来自efa-config-1.4）

  • EFA个人资料:efa-profile-1.1（来自efa-profile-1.0.0）

  • EFA内核模块：efa-1.10.2（来自efa-1.6.0）

  • RDMA核心：rdma-core-31.amzn0（来自rdma-core-28.amzn0）

  • libfabric：libfabric-1.11.1amzn1.0（从 libfabric-1.10.1amzn1.1）

  • 打开MPI：openmpi40-aws-4.0.5（从openmpi40-aws-4.0.3）

• 在 Amazon GovCloud (US) 区域中，启用对 Amazon DCV 和 Amazon Batch。

• Amazon 在中国区域，启用对 Amazon for Lustre FSx 的支持。

• 将NVIDIA驱动程序升级到版本 450.80.02（从 450.51.05 开始）。

• 安装 NVIDIA Fabric Manager 以NVIDIANVSwitch在支持的平台上启用。

• 移除了默认值 Amazon Web Services 区域 us-east-1。默认值使用以下查找顺序。

  • Amazon Web Services 区域 在-r或--region参数中指定。

  • AWS_DEFAULT_REGION 环境变量。

  • aws_region_name在 Amazon ParallelCluster 配置文件[aws]部分中设置（默认为~/.parallelcluster/config）。

  • region在 Amazon CLI 配置文件[default]部分中设置（默认为~/aws/config）。

• 与一起使用时，增加了对计算队列中的多个队列和多种实例类型的支持 Slurm Workload Manager使用队列时， 上将不再使用自动扩缩组。Slurm。 现在，已在集群中创建了 Amazon Route 53 托管区域，用于DNS解析计算节点 Slurm 使用了调度器。有关更多信息，请参阅 多队列模式。

• 在基于 ARM 的 Amazon Gravit on DCV 实例上增加了对 Amazon 的支持。

• 增加了对不支持启动模板中CPU选项的实例类型（例如实例类型）禁用超线*.metal程的支持。

• 为从头节点共享的文件系统添加了对 NFS 4 的支持。

• 移除了在引导计算节点时对 cfn-in it 的依赖，以避免在大量节点加入集群 Amazon CloudFormation 时受到限制。

• Elastic Fabric Adapter 安装程序更新为 1.9.5：

  • EFA配置:efa-config-1.4（来自efa-config-1.3）

  • EFA个人资料:efa-profile-1.0.0（新）

  • 内核模块：efa-1.6.0（无更改）

  • RDMA核心:rdma-core-28.amzn0（无变化）

  • Libfabric：libfabric-1.10.1amzn1.1（无更改）

  • 打开MPI：openmpi40-aws-4.0.3（无变化）

• 已升级 Slurm 到版本20.02.4（从19.05.5）。

• 亚马逊DCV已更新至亚马逊 DCV 2020.1-9012。有关更多信息，请参阅《亚马逊管理员指南》中的 DCV 2020.1-9012 — 2020 年 8 月 24 日发行说明。DCV

• 挂载共享云NFS端硬盘时，请使用头节点私有 IP 地址而不是主机名。

• 在 Logs 中添加了新的 CloudWatch 日志流：chef-clientclustermgtdcomputemgtd、slurm_resume、、和slurm_suspend。

• 在预安装和安装后脚本中添加了对队列名称的支持。

• 在中 Amazon GovCloud (US) Amazon Web Services 区域，使用亚马逊 DynamoDB 按需计费选项。有关更多信息，请参阅 Amazon DynamoDB 开发人员指南 中的按需模式。

• 禁用 Amazon DCV 会话的屏幕锁定，以防止用户被锁定。

• 修复了包含基于 ARM 的 Amazon Graviton 实例类型时的 pcluster configure。

• 增加了对基于 ARM 的基于 Amazon Graviton 的实例（如和）的支持。A1 C6g

• 增加了对 Amazon for Lustre 的每日自动备份功能FSx的支持。有关更多信息，请参阅 automatic_backup_retention_days、copy_tags_to_backups、daily_automatic_backup_start_time 和 fsx_backup_id。

• 从 pcluster createami 中删除了对 Berkshelf 的依赖。

• 改进了 pcluster update 的可靠性和用户体验。有关更多信息，请参阅 使用 pcluster update。

• Elastic Fabric Adapter 安装程序更新为 1.9.4：

  • 内核模块：efa-1.6.0（从 efa-1.5.1 进行更新）

  • RDMA核心:rdma-core-28.amzn0（更新自rdma-core-25.0）

  • Libfabric：libfabric-1.10.1amzn1.1（从 libfabric-aws-1.9.0amzn1.1 进行更新）

  • 打开MPI：openmpi40-aws-4.0.3（无变化）

• 将NVIDIA驱动程序升级到特斯拉版本 440.95.01 CentOS 6 和 450.51.05 版本适用于所有其他发行版。

• 在除此之外的所有发行版上将CUDA库升级到 11.0 版 CentOS 6.

• base_os 现在是必需的参数。

• scheduler 现在是必需的参数。

• 亚马逊DCV已更新至亚马逊 DCV 2020.0。有关更多信息，请参阅 Amazon DCV 发布的支持环绕声 7.1 和触控笔的 2020.0 版。

  英特尔MPI已更新至 2019 版更新 7（从 2019 年版本更新 6 更新）。有关更多信息，请参阅英特尔® MPI 库 2019 年更新 7。

  Elastic Fabric Adapter 安装程序更新为 1.8.4：

  • 内核模块：efa-1.5.1（无更改）

  • RDMA核心:rdma-core-25.0（无变化）

  • Libfabric：libfabric-aws-1.9.0amzn1.1（无更改）

  • 打开MPI:openmpi40-aws-4.0.3（更新自openmpi40-aws-4.0.2）

• Upgrade CentOS 7 AMI 到 7.8-2003 版本（从 7.7-1908 年更新）。有关更多信息，请参阅 CentOS-7 (2003) 发行说明。

• 已cfn-wire从存储在 Amazon 日志中的 CloudWatch 日志中移除cfn-init-cmd和。有关更多信息，请参阅 与 Amazon CloudWatch 日志集成。

• 添加了对 Amazon Linux 2 的支持

• 现在，Amazon CloudWatch 日志用于收集集群和计划程序日志。有关更多信息，请参阅 与 Amazon CloudWatch 日志集成。

• 增加了对全新 Amazon f FSx or Lustre 部署类型的支持SCRATCH_2，以及。PERSISTENT_1开启 Support FSx for Lustre Ubuntu 18.04 和 Ubuntu 16.04。有关更多信息，请参阅 fsx。

• 增加了对 Amaz DCV on 的支持 Ubuntu 18.04。有关更多信息，请参阅 通过 Amazon 连接到头节点 DCV。