Amazon SageMaker Unified Studio prend désormais en charge AWS Glue 5.1 pour les tâches de traitement des données
Amazon SageMaker Unified Studio prend désormais en charge AWS Glue 5.1 pour les tâches de traitement de données ETL visuelles, de notebook et basées sur du code. Grâce à AWS Glue 5.1 dans Amazon SageMaker Unified Studio, les ingénieurs et scientifiques des données peuvent exécuter des tâches sur Apache Spark 3.5.6 avec Python 3.11 et Scala 2.12.18, et utiliser des bibliothèques de formats de table ouverts mises à jour, notamment Apache Iceberg 1.10.0, Apache Hudi 1.0.2 et Delta Lake 3.3.2.
Vous pouvez utiliser AWS Glue 5.1 dans Amazon SageMaker Unified Studio lors de la création de tâches de traitement de données en sélectionnant Glue 5.1 dans la liste déroulante des versions dans les paramètres des tâches. Cela s'applique aux tâches ETL visuelles, de notebook et basées sur du code, de sorte que vous puissiez tirer parti de la dernière version de l'environnement d'exécution Spark et des bibliothèques de formats de table ouverts dans tous vos flux de travail de traitement de données.
AWS Glue 5.1 dans Amazon SageMaker Unified Studio est disponible dans toutes les régions où Amazon SageMaker Unified Studio est disponible. Pour en savoir plus, consultez la documentation relative à Amazon SageMaker Unified Studio. Pour en savoir plus sur ce qui est inclus dans AWS Glue 5.1, notamment la prise en charge actualisée du format de table ouvert et les fonctionnalités de contrôle d'accès, consultez la documentation relative à AWS Glue.