Amazon EMR on EKS 6.6.0 版本
以下 Amazon EMR 6.6.0 版本适用于 Amazon EMR on EKS。选择特定的 emr-6.6.0-XXXX 版本以查看更多详细信息,例如相关的容器映像标签。
Amazon EMR 6.6.0 的版本注释
-
受支持的应用程序 ‐ Spark 3.2.0-amzn-0、Jupyter Enterprise Gateway(端点、公共预览版)、Hudi 0.10.1-amzn-0、Iceberg 0.13.1。
-
受支持的组件 –
aws-hm-client
(Glue 连接器)、aws-sagemaker-spark-sdk
、emr-s3-select
、emrfs
、emr-ddb
、hudi-spark
。 -
受支持的配置分类:
分类 描述 core-site
更改 Hadoop 的 core-site.xml 文件中的值。
emrfs-site
更改 EMRFS 设置。
spark-metrics
更改 Spark 的 metrics.properties 文件中的值。
spark-defaults
更改 Spark 的 spark-defaults.conf 文件中的值。
spark-env
更改 Spark 环境中的值。
spark-hive-site
更改 Spark 的 hive-site.xml 文件中的值。
spark-log4j
更改 Spark 的 log4j.properties 文件中的值。
配置分类允许您自定义应用程序。这些通常与应用程序的配置 XML 文件(如 spark-hive-site.xml)相对应。有关更多信息,请参阅配置应用程序。
已知问题
-
在 Amazon EMR on EKS 版本 6.4、6.5 和 6.6 中,具有交互式端点的 Spark Pod 模板功能不起作用。
已解决的问题
-
交互式端点日志将上传到 Cloudwatch 和 S3。