发布于: Nov 20, 2023
宣布全面推出两项新功能，以增强对 AWS Glue 作业的监控和调试：AWS Glue 无服务器 Apache Spark UI 和 AWS Glue 可观测性指标。AWS Glue 无服务器 Spark UI 是一项新功能，可让您获取有关 AWS Glue Spark 作业的详细信息。此发布允许您查看在 AWS Glue Studio 中运行的任何 AWS Glue Spark 作业的详细信息。使用 AWS Glue 无服务器 Spark UI，您可以获取有关调度器阶段、任务和执行程序的信息。AWS Glue 可观测性指标为作业可靠性、性能、吞吐量和资源利用率提供了更多见解。这两项新功能使您能够调试具有根本原因的常见错误类，分析工作节点的总体性能，并监控 Glue 作业中的数据偏差。
您可以使用 AWS Glue Studio 作业监控来查看无服务器 Spark UI 和可观测性指标。可通过 Glue Studio 中 Glue 作业页面上的新“Spark UI”选项卡访问无服务器 Spark UI。您还可以导航到 AWS Glue Studio 中的作业运行监控页面，查看无服务器 Spark UI 和可观测性指标。AWS Glue 无服务器 Spark UI 是完全托管的，您无需管理基础设施。AWS Glue 可观测性指标已发布到 Amazon CloudWatch。
AWS Glue 无服务器 Spark UI 和可观测性指标在使用 AWS Glue 3.0 及更高版本时可用，已在提供 AWS Glue 的所有商业区域推出。
要了解更多信息，请访问我们关于无服务器 Spark UI 和可观测性指标的文档。