Amazon EMR on EKS 6.6.0 版本 - Amazon EMR
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅 中国的 Amazon Web Services 服务入门 (PDF)

Amazon EMR on EKS 6.6.0 版本

以下 Amazon EMR 6.6.0 版本适用于 Amazon EMR on EKS。选择特定的 emr-6.6.0-XXXX 版本以查看更多详细信息,例如相关的容器映像标签。

Amazon EMR 6.6.0 的版本注释

  • 受支持的应用程序 ‐ Spark 3.2.0-amzn-0、Jupyter Enterprise Gateway(端点、公共预览版)、Hudi 0.10.1-amzn-0、Iceberg 0.13.1。

  • 受支持的组件 – aws-hm-client(Glue 连接器)、aws-sagemaker-spark-sdkemr-s3-selectemrfsemr-ddbhudi-spark

  • 受支持的配置分类:

    分类 描述

    core-site

    更改 Hadoop 的 core-site.xml 文件中的值。

    emrfs-site

    更改 EMRFS 设置。

    spark-metrics

    更改 Spark 的 metrics.properties 文件中的值。

    spark-defaults

    更改 Spark 的 spark-defaults.conf 文件中的值。

    spark-env

    更改 Spark 环境中的值。

    spark-hive-site

    更改 Spark 的 hive-site.xml 文件中的值。

    spark-log4j

    更改 Spark 的 log4j.properties 文件中的值。

    配置分类允许您自定义应用程序。这些通常与应用程序的配置 XML 文件(如 spark-hive-site.xml)相对应。有关更多信息,请参阅配置应用程序

已知问题

  • 在 Amazon EMR on EKS 版本 6.4、6.5 和 6.6 中,具有交互式端点的 Spark Pod 模板功能不起作用。

已解决的问题

  • 交互式端点日志将上传到 Cloudwatch 和 S3。