Apache Oozie - Amazon EMR
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 Amazon Web Services 服务入门

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

Apache Oozie

使用 Apache Oozie 工作流调度程序管理和协调 Hadoop 作业。有关详细信息,请参阅 http://oozie.apache.org/

亚马逊 EMR 上不支持 Oozie 本机 Web 界面。要使用 Oozie 的前端接口,请尝试色调 Oozie 应用程序。有关更多信息,请参阅Hue。Oozie 包含在亚马逊 EMR 发行版 5.0.0 及更高版本中。Oozie 作为沙盒应用程序包含在早期版本中。有关更多信息,请参阅亚马逊 EMR 4.x 发行版本

如果您使用基于亚马逊 Linux AMI 的自定义亚马逊 Linux AMI,创建日期为 2018-08-11,则 Oozie 服务器无法启动。如果您使用 Oozie,请根据具有不同创建日期的亚马逊 Linux AMI ID 创建自定义 AMI。您可以使用以下Amazon CLI命令返回所有具有 2018.03 版本的 HVMAmazon Linux AMI 的映像 ID 列表以及发布日期,以便您可以选择适当的亚马逊 Linux AMI 作为您的基础。将 MyRegist-2 替换为您的区域标识符 (如 us-west-2)。

aws ec2 --region MyRegion describe-images --owner amazon --query 'Images[?Name!=`null`]|[?starts_with(Name, `amzn-ami-hvm-2018.03`) == `true`].[CreationDate,ImageId,Name]' --output text | sort -rk1

下表列出了亚马逊 EMR 6.x 系列的最新发布版本附带的 Oozie 版本,以及 Amazon EMR 随 Oozie 一起安装的组件。

有关随 Oozie 一起安装的组件的版本,请参阅发行版 6.3.0 组件版本

emr-6.3.0 的版本信息
EMR 发布版标签 Oozie 版 与 Oozie 一起安装的零部件

emr-6.3.0

Ooz5.2.1

emrfs、emr-ddb、emr-goodies、emr-kinesis、emr-s3-dist-cp、hadoop-client、hadoop-mapred、hadoop-hdfs-datanode、hadoop-hdfs-library、hadoop-hdfs-namenode、hadoop-httpfs-server、hadoop-kms-server、hadoop-yarn-nodemanager、hadoop-yarn-resourcemanager、hadoop-yarn-timeline-server、oozie-client、oozie-server、tez-on-yarn

下表列出了 Amazon EMR-5.x 系列的最新发布版本附带的 Oozie 版本,以及 Amazon EMR 随 Oozie 一起安装的组件。

有关随 Oozie 一起安装的组件的版本,请参阅发行版 5.33.0 组件版本

emr-5.33.0 的版本信息
EMR 发布版标签 Oozie 版 与 Oozie 一起安装的零部件

emr-5.33.0

Oozie 5.2.0

emrfs、emr-ddb、emr-goodies、emr-kinesis、emr-s3-dist-cp、hadoop-client、hadoop-mapred、hadoop-hdfs-datanode、hadoop-hdfs-library、hadoop-hdfs-namenode、hadoop-httpfs-server、hadoop-kms-server、hadoop-yarn-nodemanager、hadoop-yarn-resourcemanager、hadoop-yarn-timeline-server、oozie-client、oozie-server、tez-on-yarn