本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
Amazon Glue PySpark 变换参考
Amazon Glue 提供了以下内置变换,您可以在 PySpark ETL 操作中使用这些变换。您的数据在名为 a 的数据结构中从一个转换传递到另一个转换 DynamicFrame,该数据结构是 Apache Spark SQL DataFrame
的扩展。DynamicFrame
包含您的数据,并引用其架构来处理您的数据。
此外,其中的大多数转换也将作为 DynamicFrame
类的方法存在。有关更多信息,请参阅DynamicFrame 变换。