本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
亚马逊EMR在 EKS 6.4.0 版本上
以下亚马逊 EMR 6.4.0 版本可在亚马逊EMR上EKS使用。选择特定的 emr-6.4.0 XXXX 版本以查看更多详细信息,例如相关的容器镜像标签。
亚马逊 EMR 6.4.0 版本说明
-
受支持的应用程序 - Spark 3.1.2-amzn-0、Jupyter Enterprise Gateway(终端节点,公共预览版)。
-
受支持的组件 –
aws-hm-client
(Glue 连接器)、aws-sagemaker-spark-sdk
、emr-s3-select
、emrfs
、emr-ddb
、hudi-spark
。 -
受支持的配置分类:
分类 描述 core-site
更改 Hadoop 的 core-site.xml 文件中的值。
emrfs-site
更改EMRFS设置。
spark-metrics
更改 Spark 的 metrics.properties 文件中的值。
spark-defaults
更改 Spark 的 spark-defaults.conf 文件中的值。
spark-env
更改 Spark 环境中的值。
spark-hive-site
更改 Spark 的 hive-site.xml 文件中的值。
spark-log4j
更改 Spark 的 log4j.properties 文件中的值。
配置分类允许您自定义应用程序。它们通常对应于应用程序的配置XML文件,例如 spark-hive-site .xml。有关更多信息,请参阅配置应用程序。
已知问题
-
带有交互式终端节点的 Spark pod 模板功能在 6.4 EKS 版本的亚马逊EMR中不起作用。