Veröffentlicht am: Dec 14, 2022
Amazon EMR auf EKS unterstützt jetzt beschleunigtes Computing über GPU (Graphics Processing Unit)-Instance-Typen mithilfe von Nvidia RAPIDS Accelerator für Apache Spark. Die zunehmende Akzeptanz von künstlicher Intelligenz (KI) und Machine Learning (ML) für Analysen hat den Bedarf an schneller und kostengünstiger Datenverarbeitung mit GPUs erhöht. Nvidia RAPIDS Accelerator für Apache Spark hilft Kunden, die Vorteile der GPU-Leistung zu nutzen und gleichzeitig Infrastrukturkosten zu sparen. Mit dieser Version können EMR-auf-EKS-Kunden den RAPIDS-Accelerator verwenden, indem sie beim Aufrufen von EMR auf der EKS-API einfach das Release-Label von Spar-RAPIDS angeben.
Bisher mussten EMR-auf-EKS-Kunden ein benutzerdefiniertes Image erstellen, um den Nvidia RAPIDS Accelerator verwenden zu können. Dies erfordert technischen Aufwand und Testaufwand. Darüber hinaus mussten die Kunden bei jeder neuen Version von Nvidia RAPIDS, bei Fehlerbehebungen oder Sicherheitsaktualisierungen das benutzerdefinierte Image neu erstellen und die Tests erneut durchführen. Ab EMR 6.9 führt EMR auf EKS ein neues Image für Nvidia RAPIDS Accelerator für Spark ein. Kunden können dieselbe StartJobRun-API verwenden, um ihre Spark-Jobs auszuführen, und einfach ein neues Release-Label für Spark-RAPIDS angeben, um RAPIDS Accelerator auf einem EKS-Cluster mit GPU-unterstütztem Instance-Typ zu nutzen.
Diese Funktion ist ab Amazon EMR Version 6.9 in allen Regionen verfügbar, in denen Amazon EMR auf EKS angeboten wird. Um mehr darüber zu erfahren, wie Nvidia RAPIDS Accelerator für Apache Spark ausgeführt wird, besuchen Sie bitte die Dokumentationsseite.