Les agents de dépannage et de mise à niveau d'Apache Spark sont désormais disponibles sous forme de Kiro Power
Les agents de dépannage d’Apache Spark et de mise à niveau pour Amazon EMR sont désormais disponibles sous la forme de Kiro Power, ce qui permet d'accéder en un clic aux opérations Spark assistées par l'IA directement dans Kiro. Grâce à ces Kiro Powers, les ingénieurs de données peuvent réduire le temps de dépannage de quelques heures à quelques minutes et compresser les mises à niveau des versions de Spark de plusieurs mois à plusieurs semaines.
Lorsqu'une tâche Spark échoue, la solution de dépannage identifie la cause première en analysant les journaux, les métriques et les configurations entre EMR sur EC2 et EMR sans serveur, et fournit des recommandations de code spécifiques pour les applications PySpark. La puissance de mise à niveau automatise les mises à niveau des versions de Spark, telles que le passage d'EMR 6.5 à EMR 7.12, en gérant la transformation du code et la résolution des dépendances par le biais d'une validation à distance et d'une comparaison de la qualité des données sur EMR. Les deux puissances se connectent aux agents Spark via le proxy MCP pour AWS avec une authentification IAM basée sur les rôles, et toutes les actions sont enregistrées dans AWS CloudTrail pour une vérification complète.
Les fonctionnalités de dépannage et de mise à niveau d'Apache Spark sont disponibles avec Amazon EMR dans toutes les Régions AWS commerciales. Pour commencer, installez la puissance de dépannage d'Apache Spark ou la puissance de mise à niveau de l'IDE Kiro. Pour en savoir plus, consultez la documentation relative aux agents de dépannage et de mise à niveau.