Map 类 - Amazon Glue
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅 中国的 Amazon Web Services 服务入门 (PDF)

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

Map 类

通过将函数应用于输入 DynamicFrame 中的所有记录来生成新的 DynamicFrame

示例

我们建议您使用 DynamicFrame.map() 方法将函数应用于 DynamicFrame 中所有记录。要查看代码示例,请参阅 示例:使用映射将函数应用于 DynamicFrame 中的每个记录

方法

__call__(frame, f, transformation_ctx="", info="", stageThreshold=0, totalThreshold=0)

返回一个新的 DynamicFrame,它源自将指定函数应用到原始 DynamicFrame 中的所有 DynamicRecords

  • frame – 要对其应用映射函数的原始 DynamicFrame(必需)。

  • f – 要应用到 DynamicRecords 中的所有 DynamicFrame 的函数。该函数必须将 DynamicRecord 作为实际参数并返回一个由映射生成的新的 DynamicRecord(必需)。

    一个 DynamicRecord 表示 DynamicFrame 中的一条逻辑记录。它类似于 Apache Spark DataFrame 中的一行,但其具有自描述性,可用于不符合固定架构的数据。

  • transformation_ctx – 用于标识状态信息的唯一字符串 (可选)。

  • info – 与转换中的错误关联的字符串 (可选)。

  • stageThreshold – 在转换出错之前可能在其中发生的最大错误数(可选)。默认值为 0。

  • totalThreshold – 在处理出错之前可能全面发生的最大错误数(可选)。默认值为 0。

返回一个新的 DynamicFrame,它源自将指定函数应用到原始 DynamicFrame 中的所有 DynamicRecords

apply(cls, *args, **kwargs)

继承自 GlueTransform apply

name(cls)

继承自 GlueTransform name

describeArgs(cls)

继承自 GlueTransform describeArgs

describeReturn(cls)

继承自 GlueTransform describeReturn

describeTransform(cls)

继承自 GlueTransform describeTransform

describeErrors(cls)

继承自 GlueTransform describeErrors

describe(cls)

继承自 GlueTransform describe