发布于: May 22, 2020

AWS 已更新 Real-Time Analytics with Spark Streaming,该 AWS 解决方案将会在使用 Apache Spark Streaming 和 Amazon Kinesis 的 AWS 云上自动部署高度可用、经济高效的批处理和实时数据分析架构。此解决方案设计支持自定义 Apache Spark Streaming 应用程序,并利用 Amazon EMR 处理可动态扩展的 Amazon Elastic Compute Cloud (Amazon EC2) 实例中的海量数据。

该解决方案现在包括使用最新版本 Spark 的更新消费应用程序,并利用现代化功能(如 Spark SQL 和 DataFrames)、精细自定义 IAM 策略、静态加密(默认)、VPC 流日志、将示例 Spark Streaming 移植到 Java(从 Scala)以及多项维护升级(例如将 Python 升级到版本 3.8 以及将 Amazon EMR 升级到版本 5.29.0)。要了解与 AWS 上的 Real-Time Analytics with Spark Streaming 相关的更多信息,请参阅解决方案网页

AWS 解决方案网页上提供了其他 AWS 解决方案产品,客户可以按产品类别或行业浏览解决方案,查找经过 AWS 审查的自动化一站式参考实施方法,满足特定业务需求。