Annonce du dépannage par l'IA générative pour Apache Spark dans AWS Glue (version préliminaire)
AWS Glue annonce le dépannage par l'IA générative pour Apache Spark, une nouvelle fonctionnalité qui aide les ingénieurs et scientifiques des données à identifier et résoudre rapidement les problèmes dans le cadre de leurs tâches Spark. Spark Troubleshooting utilise le machine learning et des technologies d'IA générative pour fournir une analyse automatique des causes premières des problèmes liés aux tâches Spark, ainsi que des recommandations pratiques pour résoudre les problèmes identifiés.
AWS Glue est un service d'intégration de données sans serveur et évolutif qui facilite la découverte, la préparation et la combinaison des données pour l'analytique, le machine learning et le développement d'applications. Grâce à Spark Troubleshooting, vous pouvez lancer une analyse automatique des tâches ayant échoué en un seul clic dans la console AWS Glue. Cette fonctionnalité fournit une analyse des causes premières et des étapes de résolution pour les problèmes Spark difficiles à diagnostiquer, tels que les erreurs de mémoire, les problèmes de distorsion des données et les exceptions liées aux ressources introuvables. Cela vous permet de réduire les interruptions de service dans les pipelines de données critiques. Optimisé par Amazon Bedrock, Spark Troubleshooting réduit le temps de débogage de plusieurs jours à quelques minutes.
La version préliminaire du dépannage par l'IA générative pour Apache Spark est disponible pour les tâches exécutées sur AWS Glue 4.0 et dans les régions AWS suivantes : USA Est (Virginie du Nord), USA Ouest (Oregon), Europe (Irlande), USA Est (Ohio), etc. Pour en savoir plus, consultez le site web d'AWS Glue, le blog de lancement ou encore la documentation.