启用目录级别自动统计数据生成 - Amazon Glue
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异，请参阅 中国的 Amazon Web Services 服务入门 (PDF)。

启用目录级别自动统计数据生成

您可以为 Data Catalog 中所有新的 Apache Iceberg 表和非 OTF 表（Parquet、JSON、CSV、XML、ORC、ION）格式的表启用自动列统计数据生成。创建表后，您还可以手动显式更新列统计数据设置。

要更新 Data Catalog 设置以启用目录级别，使用的 IAM 角色必须对根目录具有 glue:UpdateCatalog 权限或 Amazon Lake Formation ALTER CATALOG 权限。您可以使用 GetCatalog API 来验证目录属性。

Amazon Web Services Management Console
在账户级别启用自动列统计数据生成

  1. 通过 https://console.aws.amazon.com/lakeformation/ 打开 Lake Formation 控制台。

  2. 在左侧导航栏上，选择目录。

  3. 在目录摘要页面上，选择优化配置下的编辑。

    此屏幕截图显示了可用于生成列统计数据的选项。

  4. 在表优化配置页面上，选择启用自动为目录表生成统计数据选项。

    此屏幕截图显示了可用于生成列统计数据的选项。

  5. 选择一个现有 IAM 角色或创建一个具有运行列统计数据任务所需权限的新角色。

  6. 选择提交。

Amazon CLI

您也可以通过 Amazon CLI 启用目录级别统计数据收集。要使用 Amazon CLI 配置表级统计数据收集，请运行下面的命令：

aws glue update-catalog --cli-input-json '{
    "name": "123456789012",
    "catalogInput": {
        "description": "Updating root catalog with role arn",
        "catalogProperties": {
            "customProperties": {
                "ColumnStatistics.RoleArn": "arn:aws:iam::"123456789012":role/service-role/AWSGlueServiceRole",
                "ColumnStatistics.Enabled": "true"
            }
        }
    }
}'

上面的命令调用 Amazon Glue 的 UpdateCatalog 操作，它采用具有以下键值对的 CatalogProperties 结构生成目录级别统计数据：

  • ColumnStatistics.RoleArn：用于为生成目录级别统计数据而触发的所有任务的 IAM 角色 ARN

  • ColumnStatistics.Enabled：表示目录级别设置是启用还是禁用的布尔值