发布于: Nov 21, 2023
今天,我们很高兴地宣布,Apache Flink 现已针对 EKS 上的 Amazon EMR 全面推出。Apache Flink 是一种用于对数据流进行有状态计算的开源框架。借助适用于 EKS 上的 Amazon EMR 的 Apache Flink,客户可以使用 Apache Flink 实时转换和分析流数据。EKS 上的 Amazon EMR 是 Amazon EMR 的一种部署选项,让客户可以在 EKS 上轻松运行大数据应用程序和数据湖分析工作负载。已经在使用 Amazon EKS 的客户可以在同一 Amazon EKS 集群上运行 Apache Flink 应用程序和其他类型的应用程序,从而帮助提高资源利用率并简化基础设施管理。
此次发布后,客户可以在 EKS 上的 Amazon EMR 中使用 Apache Flink 来降低构建和配置 Apache Flink 应用程序的复杂性。客户还可以在 Flink 应用程序中利用竞价型实例实现平稳停用,并且可以通过 EBS 使用精细恢复和任务本地恢复来缩短重启时间。此外,客户还可以使用一些重要的可访问性与监控功能,例如在 Amazon S3 中使用 jar 启动 Flink 应用程序、监控与 Amazon S3 和 Amazon CloudWatch 的集成以及容器日志轮换。最后,客户可以使用连接器将 EKS 上的 Amazon EMR 与 Amazon Glue Data Catalog、Amazon Kinesis Data Streams 和 Amazon DynamoDB Streams 等工具集成。