受支持的分区投影类型 - Amazon Athena
AWS 文档中描述的 AWS 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 AWS 服务入门

如果我们为英文版本指南提供翻译,那么如果存在任何冲突,将以英文版本指南为准。在提供翻译时使用机器翻译。

受支持的分区投影类型

表可以具有 enumintegerdate,injected 分区列类型的任意组合。

枚举类型

enum 类型用于其值为枚举集成员(例如,机场代码或 AWS 区域)的分区列。

在表中定义分区属性,如下所示:

属性名称 示例值 Description
projection.columnName.type

enum

必填 要用于列的投影类型 columnName该值必须是 enum(不区分大小写)才能发出使用枚举类型的信号。允许前导和尾随空格。
projection.columnName.values

A,B,C,D,E,F,G,Unknown

必填 列枚举分区值的逗号分隔列表 columnName任何空格均被视为枚举值的一部分。
注意

作为最佳做法,我们建议限制使用 enum 基于分区的预测到几十个或更少。虽然没有特定的限制 enum 预测,表元数据的总大小不能超过 AWS Glue GZIP压缩时限制约为1MB。请注意,此限制在您的表格的关键部分共享,例如列名称、位置、存储格式和其他。如果您在您的 enum 投影,考虑一种替代方法,例如在替代字段中划分成较少数量的唯一值。通过交易Cardinality,您可以控制 enum 字段。

整数类型

将整数类型用于其可能的值可被解释为定义的范围内的整数的分区列。投影整数列目前仅限于 Java 有符号长整型值的范围(-263 到 263-1,含这两个值)。

属性名称 示例值 Description
projection.columnName.type

integer

必填 要用于列的投影类型 columnName该值必须是 integer(不区分大小写)才能发出使用整数类型的信号。允许前导和尾随空格。
projection.columnName.range

0,10

-1,8675309

0001,9999

必填 两个元素的逗号分隔列表,可以通过列上查询返回的最小值和最大范围值 columnName这些值包含在内,它们可以是负数,并且可以有前导零。允许前导和尾随空格。
projection.columnName.interval

1

5

:可选。指定列的连续分区值之间的间隔的正整数 columnName例如,具有 interval 值“1”的 range 值“1,3”将产生值 1、2 和 3。具有 interval 值“2”的相同 range 值将产生值 1 和 3,并跳过 2。允许前导和尾随空格。默认值为 1。
projection.columnName.digits

1

5

:可选。一个正整数,用于指定分区值在列的最终代表中包含的数字数 columnName例如,具有 digits 值“1”的 range 值“1,3”将产生值 1、2 和 3。具有 digits 值“2”的相同 range 值将产生值 01、02 和 03。允许前导和尾随空格。默认值不包含静态位数和前导零。

日期类型

将日期类型用于其值可被解释为定义的范围内的日期(带可选时间)的分区列。

重要

投影日期列在查询执行时以协调世界时 (UTC) 格式生成。

属性名称 示例值 Description
projection.columnName.type

date

必填 要用于列的投影类型 columnName该值必须是 date(不区分大小写)才能发出使用日期类型的信号。允许前导和尾随空格。
projection.columnName.range

201701,201812

01-01-2010,12-31-2018

NOW-3YEARS,NOW

201801,NOW+1MONTH

必填 一个双元素,以逗号分隔的列表提供最小和最大值 range 列的值 columnName这些值包含在内,它们可以使用任何与 Java java.time.* 日期类型兼容的格式。最小值和最大值必须使用相同的格式。.format 属性中指定的格式必须是用于这些值的格式。

此列还可以包含格式为以下正则表达式模式的相对日期字符串:

\s*NOW\s*(([\+\-])\s*([0-9]+)\s*(YEARS?|MONTHS?|WEEKS?|DAYS?|HOURS?|MINUTES?|SECONDS?)\s*)?

允许使用空格,但在日期中,文本将被视为日期字符串的一部分。

projection.columnName.format

yyyyMM

dd-MM-yyyy

dd-MM-yyyy-HH-mm-ss

必填 基于 Java 日期格式 DateTimeFormatter 的日期格式字符串。可以是任何受支持的 Java.time.* 类型。
projection.columnName.interval

1

5

指定列的连续分区值之间的间隔的正整数 columnName例如,具有 interval1interval.unitMONTHSrange2017-01,2018-12 将产生值 2017-01、2017-02、2017-03,依此类推。具有 interval2interval.unitMONTHS 的相同 range 值将产生值 2017-01、2017-03、2017-05,依此类推。允许前导和尾随空格。

如果提供的日期的精度为单日或单月,则 interval 是可选的,默认值分别为 1 天或 1 个月。否则,interval 是必需的。

projection.columnName.interval.unit

YEARS

MONTHS

WEEKS

DAYS

HOURS

MINUTES

SECONDS

MILLISECONDS

一个时间单位词,它表示 ChronoUnit 的序列化形式。可能值为 YEARSMONTHSWEEKSDAYSHOURSMINUTESSECONDS,或 MILLISECONDS。这些值不敏感。

如果提供的日期的精度为单日或单月,则 interval.unit 是可选的,默认值分别为 1 天或 1 个月。否则,interval.unit 是必需的。

注入的类型

将注入的类型用于分区列,这些分区列的可能值无法在某个逻辑范围内通过程序生成,而是在查询的 WHERE 子句中作为单个值提供。

请务必记住以下几点:

  • 如果未为每个注入列提供筛选条件表达式,则对注入列进行的查询将失败。

  • 如果列上的筛选条件表达式允许多个值,则对注入列进行的查询将失败。

属性名称 Value Description
projection.columnName.type

injected

必填 列使用的投影类型 columnName指定的值必须是 injected(不区分大小写)。允许前导和尾随空格。

有关更多信息,请参阅 Injection。)