Filter 类 - Amazon Glue
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅 中国的 Amazon Web Services 服务入门 (PDF)

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

Filter 类

生成新的 DynamicFrame,其中包含满足指定谓词函数的输入 DynamicFrame 中的记录。

示例

我们建议您使用 DynamicFrame.filter() 方法在 DynamicFrame 中筛选记录。要查看代码示例,请参阅 示例:使用筛选条件获取筛选后的字段选择

方法

__call__(frame, f, transformation_ctx="", info="", stageThreshold=0, totalThreshold=0))

返回新的 DynamicFrame,其通过从满足指定谓词函数的输入 DynamicFrame 中选择记录生成。

  • frame – 要将指定筛选函数应用到的源 DynamicFrame (必需)。

  • f – 要应用到 DynamicFrame 中的每个 DynamicRecord 的谓词函数。该函数必须将 DynamicRecord 作为实际参数,并且如果 DynamicRecord 满足筛选要求,则返回 True,否则返回 False(必需)。

    一个 DynamicRecord 表示 DynamicFrame 中的一条逻辑记录。其类似于 Spark DataFrame 中的一行,但其具有自描述性,可用于不符合固定架构的数据。

  • transformation_ctx – 用于标识状态信息的唯一字符串 (可选)。

  • info – 与转换中的错误关联的字符串(可选)。

  • stageThreshold – 在转换出错之前可能在其中发生的最大错误数(可选)。默认值为 0。

  • totalThreshold – 在处理出错之前可能全面发生的最大错误数(可选)。默认值为 0。

apply(cls, *args, **kwargs)

继承自 GlueTransform apply

name(cls)

继承自 GlueTransform name

describeArgs(cls)

继承自 GlueTransform describeArgs

describeReturn(cls)

继承自 GlueTransform describeReturn

describeTransform(cls)

继承自 GlueTransform describeTransform

describeErrors(cls)

继承自 GlueTransform describeErrors

describe(cls)

继承自 GlueTransform describe