Amazon SageMaker Unified Studio unterstützt jetzt AWS Glue 5.1 für Datenverarbeitungsaufgaben
Amazon SageMaker Unified Studio unterstützt jetzt AWS Glue 5.1 für Visual ETL-, Notebook- und codebasierte Datenverarbeitungsaufgaben. Mit AWS Glue 5.1 in Amazon SageMaker Unified Studio können Data Engineers und Datenwissenschaftler Aufgaben auf Apache Spark 3.5.6 mit Python 3.11 und Scala 2.12.18 ausführen und aktualisierte Open-Table-Format-Bibliotheken verwenden, darunter Apache Iceberg 1.10.0, Apache Hudi 1.0.2 und Delta Lake 3.3.2.
Sie können Datenverarbeitungsaufgaben mit AWS Glue 5.1 in Amazon SageMaker Unified Studio erstellen, indem Sie Glue 5.1 aus dem Dropdown-Menü "Versionen" in den Aufgabeneinstellungen auswählen. Das trifft auf Visual ETL-Aufgaben, Notebook-Aufgaben und codebasierte Aufgaben zu. So können Sie die Vorteile der neuesten Spark-Runtime- und Open-Table-Format-Bibliotheken in all Ihren Workflows zur Datenverarbeitung nutzen.
AWS Glue 5.1 in Amazon SageMaker Unified Studio ist in allen Regionen verfügbar, in denen Amazon SageMaker Unified Studio verfügbar ist. Weitere Informationen finden Sie in der Dokumentation zu Amazon SageMaker Unified Studio. Einzelheiten zu den Funktionen von AWS Glue 5.1, einschließlich der Unterstützung für das aktualisierte Open-Table-Format und der Möglichkeiten zur Zugriffssteuerung, finden Sie in der Dokumentation zu AWS Glue.