压缩格式 - Amazon Athena
AWS 文档中描述的 AWS 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 AWS 服务入门

如果我们为英文版本指南提供翻译,那么如果存在任何冲突,将以英文版本指南为准。在提供翻译时使用机器翻译。

压缩格式

本节中列出的压缩格式用于 CREATE TABLE 查询。对于 CTAS 查询, Athena 支持 GZIP 和 SNAPPY(针对以 Parquet 和 ORC 格式存储的数据)。如果您省略了格式,则默认情况下使用 GZIP。有关更多信息,请参阅 CREATE TABLE AS

Athena 支持以下压缩格式:

  • SNAPPY – Parquet 数据存储格式文件的默认压缩格式。

  • ZLIB – ORC 数据存储格式文件的默认压缩格式。

  • LZO

  • GZIP

  • BZIP2

注释和资源

  • 对于 CSV、TSV 和 JSON 格式的数据,Athena 根据文件扩展名确定压缩类型。如果不存在文件扩展名,则 Athena 将数据视为未压缩的纯文本。如果您的数据已压缩,请确保文件名包含压缩扩展名,例如 gz

  • 不支持 ZIP 文件格式。

  • 对于从 Athena 查询 Amazon Kinesis Data Firehose 日志,支持的格式包括 GZIP 压缩或采用 SNAPPY 压缩的 ORC 文件。

  • 有关使用压缩的更多信息,请参阅 AWS 大数据博客帖子面向 Amazon Athena 的 10 大性能优化提示中的第 3 部分(“压缩和拆分文件”)。