Apache Flink
Apache Flink
此外,Flink 具有适用于第三方数据源的连接器,例如以下内容:
Amazon EMR 支持 Flink 作为 YARN 应用程序,以便您能管理资源以及集群中的其它应用程序。利用 Flink-on-YARN,您可以提交临时 Flink 作业,也可以创建一个长时间运行的集群,该集群接受多个作业并根据整体 YARN 预留分配资源。
Flink 包含在 Amazon EMR发行版 5.1.0 及更高版本中。
注意
在 Amazon EMR 5.2.1 发行版本中增加了对 FlinkKinesisConsumer
类的支持。
下表列出了 Amazon EMR 6.x 系列的最新发行版附带的 Flink 的版本,以及 Amazon EMR 随 Flink 一起安装的组件。
有关此发行版中随 Flink 安装的组件版本,请参阅 Release 6.14.0 Component Versions。
emr-6.14.0 的 Flink 版本信息 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
Amazon EMR 发行版标签 | Flink 版本 | 随 Flink 安装的组件 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
emr-6.14.0 |
Flink 1.17.1-amzn-0 |
emrfs, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, flink-client, flink-jobmanager-config, hudi, delta-standalone-connectors |
下表列出了 Amazon EMR 5.x 系列的最新发行版附带的 Flink 的版本,以及 Amazon EMR 随 Flink 一起安装的组件。
有关此发行版中随 Flink 安装的组件版本,请参阅 Release 6.14.0 Component Versions。
emr-5.36.1 的 Flink 版本信息 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
Amazon EMR 发行版标签 | Flink 版本 | 随 Flink 安装的组件 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
emr-5.36.1 |
Flink 1.14.2 |
emrfs, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, flink-client, flink-jobmanager-config |