在 Amazon EMR Spark 作业中使用垂直自动扩展 - Amazon EMR
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅 中国的 Amazon Web Services 服务入门 (PDF)

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

在 Amazon EMR Spark 作业中使用垂直自动扩展

EKS纵向自动扩展的 Amaz EMR on 会自动调整内存和CPU资源,以适应您为 Amazon EMR Spark 应用程序提供的工作负载的需求。此功能可简化资源管理工作。

为了跟踪 Amazon EMR Spark 应用程序的实时和历史资源利用率,垂直自动扩展利用 Kubernetes Vertical Pod Autoscaler ()。VPA垂直自动缩放功能使用VPA收集的数据来自动调整分配给 Spark 应用程序的内存和CPU资源。这种简化流程既能提高可靠性,又能优化成本。