張貼日期: Jul 25, 2019

AWS Glue 更新了 Apache Spark 基礎設施,可在 ETL 任務支援 Apache Spark 2.4.3 (還支援 Apache Spark 2.2.1),讓您充分利用此版本的 Apache Spark 中提供的穩定性修正和新功能。 

您可以在任務屬性選擇 Glue 版本,挑選您要執行 Glue 任務的 Apache Spark 基礎設施。建立時未指定 Glue 版本的現有 Glue ETL 任務,預設將會使用 Glue 版本 0.9。使用 Glue 版本 1.0 的 Glue 任務會在 Apache Spark 2.4.3 上執行。除了支援最新的 Spark 版本,您也可以選擇在 ETL 任務使用 Python 2 和 Python 3。 

要進一步了解如何善用此新功能,請瀏覽我們的文件版本備註。 

除 AWS GovCloud (美國東部) 和 AWS GovCloud (美國西部) 外,提供 AWS Glue 的所有 AWS 區域均可使用此功能。