本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
指向 EKS 上的 Amazon EMR 最佳实践指南的链接 GitHub
我们通过开源社区协作编写了 Amazon EMR on EKS 最佳实践指南
安全性
注意
有关 Amazon EMR on EKS 安全性的更多信息,请参阅 Amazon EMR on EKS 安全最佳实践。
加密最佳实践:
管理网络安全
使用 Amazon Secrets Manager 存储密钥
Pyspark 作业提交
Pyspark 作业提交:
存储
使用 EBS 卷:
使用 Amazon FSx for Lustre 卷:
使用实例存储卷:
元数据仓集成
使用 Hive 元数据仓:
使用 Amazon Glue:
调试
使用 Spark 调试:
如何通过 Amazon EMR on EKS 使用自托管 Spark 历史记录服务器
排查 Amazon EMR on EKS 中的问题
故障排除
节点放置
将 Kubernetes 节点选择器single-az
和其他使用案例。
Performance
Amazon VPC 容器网络接口插件(CNI)、Cluster Autoscaler 和 Core DNS 的 EKS 最佳实践
成本优化
使用竞价型实例:
使用 Amazon Outposts
使用 Amazon Outposts 运行 Amazon EMR on EKS