来自 Kinesis 数据流的上游或源限制

症状：应用程序遇到 LimitExceededExceptions 来自其上游源 Kinesis 数据流的问题。

潜在原因：Apache Flink 库 Kinesis 连接器的默认设置为从 Kinesis 数据流源读取，对于每次 GetRecords 调用获取的最大记录数，默认设置非常激进。默认情况下，Apache Flink 配置为每次 GetRecords 调用获取 10,000 条记录（默认情况下，此调用每 200 毫秒进行一次），尽管每个分片的限制只有 1,000 条记录。

当尝试从 Kinesis 数据流中使用时，此默认行为可能会导致限制，从而影响应用程序的性能和稳定性。

您可以通过查看 CloudWatch ReadProvisionedThroughputExceeded 指标并查看该指标大于零的长期或持续时间来证实这一点。

通过观察持续的 LimitExceededException 错误，您还可以在 Amazon Managed Service for Apache Flink 应用程序的 CloudWatch 日志中看到这一点。

解决方案：您可以采取以下两项措施之一来解决这种情况：