查询 Amazon CloudFront 日志

将以下示例 DDL 语句复制并粘贴到 Athena 控制台的查询编辑器中。该示例语句使用《Amazon CloudFront 开发人员指南》的标准日志文件字段部分中记录的日志文件字段。修改用于存储日志的 Amazon S3 存储桶的 LOCATION。有关使用查询编辑器的信息，请参阅 开始使用。

此查询指定了 ROW FORMAT DELIMITED 和 FIELDS TERMINATED BY '\t'，表示字段由制表符分隔。对于 ROW FORMAT DELIMITED，Athena 默认使用 LazySimpleSerDe。列 date 使用反引号 (`) 转义，因为它是 Athena 中的保留字。有关信息，请参阅保留关键字。

CREATE EXTERNAL TABLE IF NOT EXISTS cloudfront_standard_logs (
  `date` DATE,
  time STRING,
  x_edge_location STRING,
  sc_bytes BIGINT,
  c_ip STRING,
  cs_method STRING,
  cs_host STRING,
  cs_uri_stem STRING,
  sc_status INT,
  cs_referrer STRING,
  cs_user_agent STRING,
  cs_uri_query STRING,
  cs_cookie STRING,
  x_edge_result_type STRING,
  x_edge_request_id STRING,
  x_host_header STRING,
  cs_protocol STRING,
  cs_bytes BIGINT,
  time_taken FLOAT,
  x_forwarded_for STRING,
  ssl_protocol STRING,
  ssl_cipher STRING,
  x_edge_response_result_type STRING,
  cs_protocol_version STRING,
  fle_status STRING,
  fle_encrypted_fields INT,
  c_port INT,
  time_to_first_byte FLOAT,
  x_edge_detailed_result_type STRING,
  sc_content_type STRING,
  sc_content_len BIGINT,
  sc_range_start BIGINT,
  sc_range_end BIGINT
)
ROW FORMAT DELIMITED 
FIELDS TERMINATED BY '\t'
LOCATION 's3://DOC-EXAMPLE-BUCKET/'
TBLPROPERTIES ( 'skip.header.line.count'='2' )

在 Athena 控制台中运行查询。查询完成后，Athena 将注册 cloudfront_standard_logs 表，使其中的数据可以供您发出查询。

将以下示例 DDL 语句复制并粘贴到 Athena 控制台的查询编辑器中。该示例语句使用了《Amazon CloudFront Developer Guide》的 Real-time logs 章节中记录的日志文件字段。修改用于存储日志的 Amazon S3 存储桶的 LOCATION。有关使用查询编辑器的信息，请参阅 开始使用。

此查询指定了 ROW FORMAT DELIMITED 和 FIELDS TERMINATED BY '\t'，表示字段由制表符分隔。对于 ROW FORMAT DELIMITED，Athena 默认使用 LazySimpleSerDe。列 timestamp 使用反引号 (`) 转义，因为它是 Athena 中的保留字。有关信息，请参阅保留关键字。

以下示例包含所有可用字段。若有不需要的字段，可将相应字段注释掉或者删除掉。

CREATE EXTERNAL TABLE IF NOT EXISTS cloudfront_real_time_logs ( 
`timestamp` STRING,
c-ip STRING,
time-to-first-byte BIGINT,
sc-status BIGINT,
sc-bytes BIGINT,
cs-method STRING,
cs-protocol STRING,
cs-host STRING,
cs-uri-stem STRING,
cs-bytes BIGINT,
x-edge-location STRING,
x-edge-request-id STRING,
x-host-header STRING,
time-taken BIGINT,
cs-protocol-version STRING,
c-ip-version STRING,
cs-user-agent STRING,
cs-referer STRING,
cs-cookie STRING,
cs-uri-query STRING,
x-edge-response-result-type STRING,
x-forwarded-for STRING,
ssl-protocol STRING,
ssl-cipher STRING,
x-edge-result-type STRING,
fle-encrypted-fields STRING,
fle-status STRING,
sc-content-type STRING,
sc-content-len BIGINT,
sc-range-start STRING,
sc-range-end STRING,
c-port BIGINT,
x-edge-detailed-result-type STRING,
c-country STRING,
cs-accept-encoding STRING,
cs-accept STRING,
cache-behavior-path-pattern STRING,
cs-headers STRING,
cs-header-names STRING,
cs-headers-count BIGINT,
primary-distribution-id STRING,
primary-distribution-dns-name STRING,
origin-fbl STRING,
origin-lbl STRING,
asn STRING
)
ROW FORMAT DELIMITED 
FIELDS TERMINATED BY '\t'
LOCATION 's3://DOC-EXAMPLE-BUCKET/'
TBLPROPERTIES ( 'skip.header.line.count'='2' )

在 Athena 控制台中运行查询。查询完成后，Athena 将注册 cloudfront_real_time_logs 表，使其中的数据可以供您发出查询。