Publié le: Dec 14, 2022
Amazon EMR sur EKS prend désormais en charge le calcul accéléré sur des instances de type unité de traitement graphique (GPU) grâce à l'accélérateur RAPIDS pour Apache Spark de Nvidia. L'adoption croissante de l'intelligence artificielle (IA) et du machine learning (ML) dans les analyses a augmenté la nécessité de traiter les données rapidement et à moindre coût avec les GPU. L'accélérateur RAPIDS pour Apache Spark de Nvidia aide les clients à tirer parti de l'avantage des performances du GPU tout en réduisant les coûts en infrastructure. Avec cette version, les clients EMR sur EKS peuvent utiliser l'accélérateur RAPIDS en précisant simplement l'étiquette de version Spark-RAPIDS lorsqu'ils effectuent un appel sur l'API EMR sur EKS.
Jusqu'à présent, les clients EMR sur EKS devaient créer une image personnalisée pour utiliser l'accélérateur RAPIDS de Nvidia. Cela nécessitait des efforts en matière d'ingénierie et de tests. En outre, à chaque nouvelle version, correction de bugs ou mise à jour de sécurité de RAPIDS de Nvidia, les clients devaient reconstruire l'image personnalisée et effectuer à nouveau toute une série de tests. À compter de la version EMR 6.9, EMR sur EKS lance un nouvel accélérateur RAPIDS de Nvidia pour une image Spark. Les clients peuvent utiliser la même API StartJobRun pour exécuter leurs tâches Spark et préciser simplement une nouvelle étiquette de version Spark-RAPIDS pour utiliser l'accélérateur RAPIDS sur un cluster EKS avec un type d'instances compatible avec GPU.
Cette fonctionnalité est disponible depuis la version 6.9 d'Amazon EMR dans toutes les régions où Amazon EMR sur EKS est disponible. Pour en savoir plus sur l'exécution de l'accélérateur RAPIDS de Nvidia pour Apache Spark, veuillez consulter la page de documentation.