Amazon EMR 7.6.0 - Hadoop 发布说明
Amazon EMR 7.6.0 - Hadoop 更改
| 类型 | 描述 |
|---|---|
|
新功能 |
S3A 凭证售卖框架 |
|
新功能 |
S3A Magic Committer 对 Hive 的支持 |
|
逆向移植 |
HADOOP-19309：S3A |
|
逆向移植 |
HADOOP-19050 |
|
逆向移植 |
HADOOP-18708 |
Amazon EMR 7.6.0：Hadoop 功能
-
yarn.scheduler.increment-allocation-mb和yarn.scheduler.minimum-allocation-mb的默认配置设置已从 32 修改为 1，这实际上禁用了 YARN 中的容器资源规范化。 Hadoop 中的 S3A 文件系统已得到增强，以支持请求级凭证售卖。借助此功能，发出的每个 Amazon S3 请求都将使用
AwsCredentialsProvider。这通过动态地为每个请求提供凭证来确保更高的灵活性和安全性。Hadoop 中的 S3A 文件系统支持 S3 客户端加密。