配置异常检测并生成见解

Amazon Glue 数据质量自动监测功能（DQ）根据您编写的数据质量规则评估您的数据，并提供有关数据随时间变化的见解和观测值，以便您可以立即采取行动。由于 DQ 会扫描您的数据，因此 DQ 会计算统计指标，例如行数、最大值或最小值，然后将其与阈值表达式进行比较。

数据质量异常检测的一些好处包括：

这在以下情况下时很有用：

我可以查看有关我的数据的哪些观测值？

DQ 可识别收集的数据统计信息中的异常值、数据格式变化、数据漂移和架构更改。根据观察，DQ 推荐了用户可以轻松操作的数据质量规则。统计数据包括完整性、唯一性、均值、总和 StandardDeviation、熵和。 DistinctValuesCount UniqueValueRatio

在 Amazon Glue Studio 中启用异常检测

要启用异常检测，您可以打开 Amazon Glue Studio 并开启“启用异常检测”。启用此功能后，您可以分析一段时间内的数据，并提供有关数据和观测值的数据统计信息，来对您的数据进行异常检测。

在作业中选择数据质量节点，然后选择异常检测选项卡。开启“启用异常检测”。
通过选择添加分析器来定义要监测异常情况的数据。您可以填充两个字段：“统计信息”和“数据”。

统计信息是有关数据形状和其他属性的信息。您可以一次选择一个或多个统计信息，也可以选择所有统计信息。统计数据包括：完整性、唯一性、均值、总和 StandardDeviation、熵和。 DistinctValuesCount UniqueValueRatio

数据是数据集中的列。您可以选择所有列或单个列。
选择添加异常检测范围，以保存您的更改。创建分析器后，可在异常检测范围部分中看到它们。

您也可以使用操作菜单编辑分析器，或者选择规则集编辑器选项卡，直接在规则集编辑器记事本中编辑分析器。您将在自己创建的所有规则下方看到您保存的分析器。
```
Rules = [
]

Analyzers = [
    Completeness “id”
]                 
                
```
借助更新的规则集和分析器，数据质量自动监测功能可以持续监测传入的数据，并根据您的设置通过警报或任务停止发出异常信号。