本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
移除异常值
根据参数中的设置,移除归类为异常值的数据点。
参数
-
sourceColumn— 指定可能包含异常值的现有数值列的名称。 -
outlierStrategy— 指定用于检测异常值的方法。有效值包括:-
Z_SCORE— 当一个值与均值的偏差超过标准差阈值时,将其标识为异常值。 -
MODIFIED_Z_SCORE— 当一个值与中位数的偏差超过中位数绝对偏差阈值时,将其标识为异常值。 -
IQR— 当某个值超出列数据的第一个和最后一个四分位数时,将其标识为异常值。四分位数范围 (IQR) 用于衡量中间50%的数据点所在的位置。
-
-
threshold— 指定检测异常值时要使用的阈值。如果用计算的分数outlierStrategy超过此数字,则该sourceColumn值将被标识为异常值。默认值为 3。 -
removeType— 指定删除数据的方式。有效值包括DELETE_ROWS和CLEAR。 -
trimValue— 指定是移除全部异常值还是部分异常值。此布尔值默认为FALSE。-
FALSE— 移除所有异常值 -
TRUE— 移除排名超出和中指定的百分位数阈值的异常值。minValuemaxValue
-
-
minValue— 表示异常值范围的最小百分位数值。有效范围为 0—100。 -
maxValue— 表示异常值范围的最大百分位数值。有效范围为 0—100。
以下示例显示了单曲的语法 RecipeAction操作。一个食谱至少包含一个 RecipeStep操作,并且配方步骤至少包含一个配方操作。配方操作会运行您指定的数据转换。一组配方操作按顺序运行以创建最终数据集。