本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
使用开发终端节点来开发脚本
Amazon Glue 可以创建一个环境(称为开发终端节点),您可以使用该环境以迭代方式开发和测试您的提取、转换和加载 (ETL) 脚本。您可以使用 Amazon Glue 控制台或 API 创建、编辑和删除开发终端节点。
注意
不支持将开发终端节点与 Amazon Glue 版本 2.0 任务一起使用。有关更多信息,请参阅运行 Spark ETL 任务,减少启动时间。
管理您的开发环境
在创建开发终端节点时,您可提供配置值来设置开发环境。这些值告知 Amazon Glue 如何设置网络,以便您可以安全地访问终端节点,并且终端节点可以访问您的数据存储。
然后,您可以创建一个笔记本以连接到终端节点,并使用您的笔记本编写和测试 ETL 脚本。当您对开发过程的结果感到满意时,可以创建一个运行脚本的 ETL 任务。通过此过程,您可以用交互式方式添加函数并调试脚本。
按照本节中的教程操作,了解如何通过笔记本使用开发终端节点。
主题
- 开发终端节点工作流
- Amazon Glue开发终端节点如何与 SageMaker 笔记本电脑配合使用
- 添加开发终端节点
- 查看开发终端节点属性
- 访问您的开发终端节点
- 创建在 Amazon EC2 上托管的笔记本服务器
- 教程设置:开发终端节点教程的先决条件
- 教程:设置本地 Apache Zeppelin 笔记本来测试和调试 ETL 脚本
- 教程:在 Amazon EC2 中设置 Apache Zeppelin 笔记本服务器
- 教程:在中设置 Jupyter 笔记本 JupyterLab 来测试和调试 ETL 脚本
- 教程:将 SageMaker 笔记本与开发终端节点结合使用
- 教程:将 REPL shell 与开发终端节点结合使用
- 教程:通过开发终端节点设置 PyCharm Professional
- 高级配置:在多个用户之间共享开发终端节点