监控卷网关 - AWS Storage Gateway
AWS 文档中描述的 AWS 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 AWS 服务入门

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

监控卷网关

在这一部分中,您可以找到有关如何在缓存卷或存储卷设置中监控网关的信息,包括监控与网关关联的卷以及监控上传缓冲区。使用 AWS 管理控制台可查看网关的指标。例如,您可以查看读写操作中使用的字节数、读写操作耗费的时间以及从 AWS 云检索数据耗费的时间。借助指标,您可以跟踪网关的运行状况并设置警报,以便在一个或多个指标超出定义的阈值时通知您。

Storage Gateway 将提供 CloudWatch 指标而不会加收任何费用。Storage Gateway 指标将会保留两周的时间。通过使用这些指标,您可以访问历史信息并更好地了解您的网关和卷的表现。有关 CloudWatch 的详细信息,请参阅 Amazon CloudWatch 用户指南

通过 CloudWatch 日志组获取卷网关运行状况日志

您可以使用 Amazon CloudWatch Logs 获取有关卷网关和相关资源的运行状况的信息。您可以使用日志来监控网关遇到的错误。此外,您可以使用 Amazon CloudWatch 订阅筛选器来实时自动处理日志信息。有关详细信息,请参阅 使用订阅实时处理日志数据Amazon CloudWatch 用户指南.

例如,假设您的网关已部署到启用了 VMware HA 的集群中,并且您需要了解任何错误。您可以配置 CloudWatch 日志组来监控网关,并在网关遇到错误时收到通知。您可以在激活网关时或在激活网关并运行后配置组。有关如何在激活网关时配置 CloudWatch 日志组的信息,请参阅 配置 Amazon CloudWatch 日志记录。有关 CloudWatch 日志组,参见 使用日志组和日志流Amazon CloudWatch 用户指南.

有关如何排查和修复此类错误的信息,请参阅排除卷问题

以下过程显示了激活网关后如何配置 CloudWatch 日志组。

配置 CloudWatch 日志组以与卷网关一起使用

  1. 登录 AWS 管理控制台并通过以下网址打开 AWS Storage Gateway 控制台:https://console.amazonaws.cn/storagegateway/home

  2. 选择 Gateways (网关),然后选择要为其配置 CloudWatch 日志组的网关。

  3. 对于 Actions (操作),选择 Edit gateway Information (编辑网关信息)

  4. 对于 Gateway Log Group (网关日志组),选择要使用的日志组。如果您没有日志组,请选择 Create new Log Group (创建新的日志组) 链接创建一个。系统会将您定向到 CloudWatch Logs 控制台,您可以在其中创建日志组。如果创建新的日志组,请选择刷新按钮以在列表中查看新的日志组。

  5. 完成此操作后,选择 Save

要查看日志以了解您的网关,请选择该网关,然后选择 Details (详细信息) 选项卡。

使用 Amazon CloudWatch 指标

您可以使用 AWS 管理控制台或 CloudWatch API 来获得网关的监控数据。控制台将根据来自 CloudWatch API 的原始数据显示一系列图表。您也可以通过 Amazon AWS 开发工具包 (SDK)Amazon CloudWatch API 工具之一来使用 CloudWatch API。根据您的需求差异,您可能倾向于使用控制台中显示的图表,也可能倾向于检索自 API 的图表。

无论选择何种方法使用指标,您都必须指定下列信息:

  • 要使用的指标维度。维度 是帮助您对某指标进行唯一标识的名称/值对。Storage Gateway 的维度为 GatewayIdGatewayNameVolumeId。在 CloudWatch 控制台中,您可以使用 Gateway MetricsVolume Metrics 视图轻松选择特定于网关和特定于卷的维度。有关维度的更多信息,请参阅 Amazon CloudWatch 用户指南 中的维度

  • 指标名称,如 ReadBytes

下表总结了您可使用的 Storage Gateway 指标数据的类型。

CloudWatch 命名空间 维度 说明
AWS/StorageGateway GatewayIdGatewayName

这些维度筛选描述网关各个方面的指标数据。您可以通过指定 GatewayIdGatewayName 维度标识要使用的网关。

网关的吞吐量和延迟数据基于 gateway 中的所有卷。

数据在 5 分钟期间内自动可用,无需收费。

VolumeId

该维度筛选卷专属指标数据。通过卷的 VolumeId 维度标识要使用的卷。

数据在 5 分钟期间内自动可用,无需收费。

网关和卷指标的使用方式类似于其他服务指标。您可以在下面所列的 CloudWatch 文档中找到一个有关某些最常见的指标任务的讨论:

衡量您的应用程序和网关间的性能。

数据吞吐量、数据延迟和每秒操作数是您可用来了解使用网关的应用程序存储性能状况的三个度量指标。当使用正确的聚合统计数据时,您可使用 Storage Gateway 指标来度量这些值。

统计数据 是某指标在指定时间内的集合。当您在 CloudWatch 中查看某指标的值时,将 Average 统计数据用于数据延迟(毫秒),将 Sum 统计数据用于数据吞吐量(每秒字节数),以及将 Samples 统计数据用于每秒输入/输出操作数 (IOPS)。有关更多信息,请参阅 Amazon CloudWatch 用户指南 中的统计数据

下表总结了可用来衡量应用程序和网关之间的吞吐量、延迟和 IOPS 的指标和相应统计数据。

关注项 如何测量
吞吐量

ReadBytesWriteBytes 指标与 Sum CloudWatch 统计数据结合使用。例如,5 分钟采样周期内的 Sum 指标的 ReadBytes 值除以 300 秒可以得出每秒字节数速率的吞吐量。

延迟 ReadTimeWriteTime 指标与 Average CloudWatch 统计数据结合使用。例如,Average 指标的 ReadTime 值为您提供采样周期内的每个操作的延迟时间。
IOPS ReadBytesWriteBytes 指标与 Samples CloudWatch 统计数据结合使用。例如,5 分钟采样周期内的 Samples 指标的 ReadBytes 值除以 300 秒可以得出 IOPS。

对于平均延迟图表和平均大小图表,平均值通过该期间内完成的操作 (读取或写入,以适用于图表者为准) 总数计算得出。

度量应用程序到卷的数据吞吐量

  1. 通过以下网址打开 CloudWatch 控制台:https://console.amazonaws.cn/cloudwatch/

  2. 选择 Metrics,再选择 All metrics 选项卡,然后选择 Storage Gateway

  3. 选择 Volume metrics 维度,然后找到要使用的卷。

  4. 选择 ReadBytesWriteBytes 指标。

  5. 对于 Time Range,请选择一个值。

  6. 选择 Sum 统计数据。

  7. 对于 Period,请选择值 5 分钟或更长的时间。

  8. 在得出的按时间排序的数据点集中, (其中一个用于 ReadBytes,另一个用于 WriteBytes),将各个数据点除以周期 (以秒为单位) 得出采样点当时的吞吐量。总吞吐量是各个点吞吐量的和。

下图使用 ReadBytes 统计数据显示了卷的 WriteBytesSum 指标。在图中,将光标悬浮在数据点上就会显示该数据点信息,包括其值和字节数。将字节值除以 Period 值 (5 分钟) 得出采样点当时的数据吞吐量。对于高亮点,读取吞吐量是 2384199680 字节除以 300 秒,即 7.6MB/s。

测量从应用程序到卷的每秒输入/输出操作数

  1. 通过以下网址打开 CloudWatch 控制台:https://console.amazonaws.cn/cloudwatch/

  2. 选择 Metrics,再选择 All metrics 选项卡,然后选择 Storage Gateway

  3. 选择 Volume metrics 维度,然后找到要使用的卷。

  4. 选择 ReadBytesWriteBytes 指标。

  5. 对于 Time Range,请选择一个值。

  6. 选择 Samples 统计数据。

  7. 对于 Period,请选择值 5 分钟或更长的时间。

  8. 在得出的按时间排序的数据点集中 (其中一个用于 ReadBytes,另一个用于 WriteBytes),将各个数据点除以周期 (以秒为单位) 得出 IOPS。

下图使用 ReadBytes 统计数据显示了存储卷的 WriteBytesSamples 指标。在图中,将光标悬浮在数据点上就会显示该数据点信息,包括其值和样本数。将采样值除以 Period 值 (5 分钟) 得出采样点当时的每秒操作数。对于高亮点,写入操作数是 24373 字节除以 300 秒,即每秒 81 次写入操作。

衡量网关和 AWS 间的性能

数据吞吐量、数据延迟和每秒操作是您可用来理解使用 Storage Gateway 的应用程序存储性能状况的三个衡量指标。这三个值均可使用 Storage Gateway 指标来衡量,这些指标在您使用正确的集合统计数据时为您提供。下表总结了用来衡量网关和 AWS 间的吞吐量、延迟和每秒输入/输出操作次数 (IOPS) 的指标和相应统计数据。

关注项 如何测量
吞吐量

ReadBytesWriteBytes 指标与 Sum CloudWatch 统计数据结合使用。例如,5 分钟采样周期内的 Sum 指标的 ReadBytes 值除以 300 秒可以得出每秒字节数速率的吞吐量。

延迟 ReadTimeWriteTime 指标与 Average CloudWatch 统计数据结合使用。例如,Average 指标的 ReadTime 值为您提供采样周期内的每个操作的延迟时间。
IOPS ReadBytesWriteBytes 指标与 Samples CloudWatch 统计数据结合使用。例如,5 分钟采样周期内的 Samples 指标的 ReadBytes 值除以 300 秒可以得出 IOPS。
到 AWS 的吞吐量 CloudBytesDownloadedCloudBytesUploaded 指标与 Sum CloudWatch 统计数据结合使用。例如,5 分钟样本周期内的 CloudBytesDownloaded 指标的 Sum 值除以 300 秒可得出以每秒字节数为单位的从 AWS 到网关的吞吐量。
到 AWS 的数据延迟 CloudDownloadLatency 指标与 Average 统计数据结合使用。例如,Average 指标的 CloudDownloadLatency 统计数据为您提供每操作延迟。

如需衡量网关到 AWS 的上传数据吞吐量

  1. 通过以下网址打开 CloudWatch 控制台:https://console.amazonaws.cn/cloudwatch/

  2. 选择 Metrics,再选择 All metrics 选项卡,然后选择 Storage Gateway

  3. 选择 Gateway metrics 维度并找到您希望使用的卷。

  4. 选择 CloudBytesUploaded 指标。

  5. 对于 Time Range,请选择一个值。

  6. 选择 Sum 统计数据。

  7. 对于 Period,请选择值 5 分钟或更长的时间。

  8. 在得出的按时间排序的数据点集中,将各个数据点除以周期 (以秒为单位) 获得该样本周期当时的吞吐量。

下图使用 CloudBytesUploaded 统计数据显示了网关卷的 Sum 指标。在图中,将光标悬浮在数据点上就会显示该数据点信息,包括其值和上传的字节数。将该值除以 Period 值 (5 分钟) 得出采样点当时的吞吐量。对于高亮点,从网关到 AWS 的吞吐量为 555544576 字节除以 300 秒,即 1.7MB/s。

如需衡量网关的每操作延迟

  1. 通过以下网址打开 CloudWatch 控制台:https://console.amazonaws.cn/cloudwatch/

  2. 选择 Metrics,再选择 All metrics 选项卡,然后选择 Storage Gateway

  3. 选择 Gateway metrics 维度并找到您希望使用的卷。

  4. 选择 ReadTimeWriteTime 指标。

  5. 对于 Time Range,请选择一个值。

  6. 选择 Average 统计数据。

  7. 对于 Period,请选择值 5 分钟以匹配默认报告时间。

  8. 在得出的按时间排序的点集中 (其中一个用于 ReadTime,另一个用于 WriteTime),在相同的时间样本添加数据点,以得出以毫秒为单位的总延迟。

如需衡量从网关到 AWS 的数据延迟

  1. 通过以下网址打开 CloudWatch 控制台:https://console.amazonaws.cn/cloudwatch/

  2. 选择 Metrics,再选择 All metrics 选项卡,然后选择 Storage Gateway

  3. 选择 Gateway metrics 维度并找到您希望使用的卷。

  4. 选择 CloudDownloadLatency 指标。

  5. 对于 Time Range,请选择一个值。

  6. 选择 Average 统计数据。

  7. 对于 Period,请选择值 5 分钟以匹配默认报告时间。

得出的按时间排序的数据点集包含以秒为单位的延迟。

如需对网关到 AWS 的吞吐量设置上阈值

  1. 通过以下网址打开 CloudWatch 控制台:https://console.amazonaws.cn/cloudwatch/

  2. 选择 Alarms

  3. 选择 Create Alarm (创建警报) 可启动“Create Alarm (创建警报)”向导。

  4. 选择 Storage Gateway 维度并找到要使用的网关。

  5. 选择 CloudBytesUploaded 指标。

  6. 要定义警报,请在 CloudBytesUploaded 指标大于或等于指定时间段的指定值时定义警报状态。例如,您可以定义 CloudBytesUploaded 指标在 60 分钟内 大于 10 MB 时的状态。

  7. 针对该警报状态配置要采取的行动。例如,可获得向您发送的电子邮件通知。

  8. 选择 Create Alarm

如需设置从 AWS 读取数据的上阈值警报

  1. 通过以下网址打开 CloudWatch 控制台:https://console.amazonaws.cn/cloudwatch/

  2. 选择 Create Alarm (创建警报) 可启动“Create Alarm (创建警报)”向导。

  3. 选择 StorageGateway: Gateway Metrics 维度并找到要使用的网关。

  4. 选择 CloudDownloadLatency 指标。

  5. 通过定义 CloudDownloadLatency 指标在指定时间段大于或等于指定值时的警报状态,定义警报。例如,您可以定义 CloudDownloadLatency 在 2 小时内大于 60000 毫秒时的警报状态。

  6. 针对该警报状态配置要采取的行动。例如,可获得向您发送的电子邮件通知。

  7. 选择 Create Alarm

了解卷指标

您可以在下面找到有关包含网关的卷的 Storage Gateway 指标的信息。网关的每个卷均有与其关联的一组指标。

一些卷特定的指标具有和某些网关特定的指标相同的名称。这些指标代表同类度量,但其范围限于卷,而非网关。在开始工作之前,请指定要使用网关指标还是卷指标。具体而言,在使用卷指标时,请为要查看其指标的存储卷指定卷 ID。有关更多信息,请参阅 使用 Amazon CloudWatch 指标

下表描述了可用来获取有关存储卷的信息的 Storage Gateway 指标。

指标 描述 缓存卷 存储卷
CacheHitPercent

应用程序从卷中读取的百分率,由缓存传送。样本在报告周期结束时采用。

在没有应用程序从卷读取时,该指标报告 100%。

单位:百分比

CachePercentDirty

卷在未传送到 AWS 的网关缓存的总体比例中的占比。样本在报告周期结束时采用。

使用网关的 CachePercentDirty 指标来查看未传送到 AWS 的网关缓存总体比例。有关更多信息,请参阅了解网关指标

单位:百分比

CachePercentUsed

卷对网关缓存存储空间的总体使用率占比。样本在报告周期结束时采用。

使用网关的 CachePercentUsed 指标来查看网关缓存存储空间的总体使用率。有关更多信息,请参阅了解网关指标

单位:百分比

ClientTraffic

磁带在本地客户端发送和接收的字节数。也就是说,来自客户端应用程序的 ReadBytesWriteBytes 的总量。

单位:字节

CloudTraffic

上传的字节数以及从云下载到卷的字节数。

单位:字节

CPUUsage

卷当前所使用的已分配 CPU 计算单位的百分比。

单位:百分比

HealthNotificationCount

由卷发送的运行状况通知的数量。

单位:计数

MemoryUsage

卷当前所使用的已分配内存的百分比。

单位:百分比

ReadBytes

报告周期内从场内应用程序读取的总字节数。

将此指标与 Sum 统计数据结合使用可测量吞吐量,将其与 Samples 统计数据结合使用可测量 IOPS。

单位:字节

ReadTime

报告周期内从本地应用程序进行读取操作所耗费的总毫秒数。

将该指标与 Average 统计数据结合使用以测量延迟。

单位:毫秒

WriteBytes

报告周期内写入到场内应用程序的总字节数。

将此指标与 Sum 统计数据结合使用来测量吞吐量,将其与 Samples 统计数据结合使用来测量 IOPS。

单位:字节

WriteTime

报告周期内从本地应用程序进行写入操作所耗费的总毫秒数。

将该指标与 Average 统计数据结合使用以测量延迟。

单位:毫秒

QueuedWrites

等待写入到 AWS 的字节的数目,采样于报告周期结束时。

单位:字节