Annonce de mises à niveau de l'IA générative pour Apache Spark dans AWS Glue (version préliminaire)
AWS Glue annonce des mises à niveau de l'IA générative pour Apache Spark, une nouvelle fonctionnalité d'IA générative qui permet aux professionnels des données de mettre à niveau et de moderniser rapidement leurs tâches Spark existantes. Propulsée par Amazon Bedrock, cette fonctionnalité automatise l'analyse et la mise à jour des scripts et des configurations Spark, réduisant ainsi le temps et les efforts nécessaires aux mises à niveau de Spark de plusieurs semaines à quelques minutes.
AWS Glue est un service d'intégration de données sans serveur et évolutif qui facilite la découverte, la préparation et la combinaison des données pour l'analytique, le machine learning et le développement d'applications. Avec Spark Upgrades, vous pouvez lancer des mises à niveau automatisées d'un simple clic dans la console AWS Glue pour moderniser vos tâches Spark d'une ancienne version vers la version 4.0 d'AWS Glue. Cette fonctionnalité analyse vos tâches Spark basées sur Python et génère des plans de mise à niveau détaillant les modifications de code et de configuration. Il exploite l'IA générative pour améliorer et valider de manière itérative le code mis à niveau en exécutant des tests sous forme de tâches Glue. Une fois la validation réussie, vous recevez un résumé détaillé de toutes les modifications pour examen, ce qui vous permet de déployer en toute confiance vos jobs Spark mis à niveau. Cette approche automatisée réduit la complexité des mises à niveau de Spark tout en préservant la fiabilité de vos pipelines de données.
La version préliminaire des mises à niveau génératives de l'IA pour Apache Spark est disponible pour AWS Glue dans les régions AWS suivantes : USA Est (Ohio), USA Est (Virginie du Nord), USA Ouest (Oregon), Asie-Pacifique (Tokyo) et Asie-Pacifique (Sydney). Pour en savoir plus, consultez le site web d'AWS Glue, le blog de lancement ou la documentation.