Publié le: Feb 10, 2023
Amazon EMR sans serveur est une option sans serveur d'Amazon EMR qui permet aux ingénieurs et aux spécialistes des données d'exécuter facilement des cadres d'analyse de big data open source sans configurer, gérer et dimensionner des clusters ou des serveurs. Une application EMR sans serveur utilise en interne des travailleurs pour exécuter vos charges de travail et vous pouvez configurer différentes configurations de travailleurs en fonction des besoins de votre charge de travail. Auparavant, la plus grande configuration de travailleurs disponible sur EMR sans serveur était composée de 4 processeurs virtuels avec jusqu'à 30 Go de mémoire. Aujourd'hui, nous avons le plaisir d'annoncer qu'EMR sans serveur propose désormais des configurations de travailleurs composées de 8 processeurs virtuels avec jusqu'à 60 Go de mémoire et de 16 processeurs virtuels avec jusqu'à 120 Go de mémoire, vous permettant ainsi d'exécuter davantage de charges de travail gourmandes en calcul ou en mémoire sur EMR sans serveur.
Les travailleurs plus nombreux peuvent vous aider à améliorer les performances d'exécution de vos tâches. Si votre travail implique de nombreux remaniements, le recours à des travailleurs plus nombreux peut réduire les transferts de données inefficaces entre les exécuteurs. Si votre travail souffre d'une distorsion des données, les employés plus nombreux réduisent les risques de panne de mémoire. De plus, si votre travail nécessite de mettre des données en cache, les employés plus importants vous permettent de mettre davantage de données en cache, ce qui améliore les performances du travail. Pour tirer parti de ces avantages, nous vous recommandons de faire appel à des opérateurs plus volumineux dans EMR sans serveur pour vos charges de travail Spark et Hive gourmandes en ressources de calcul et de mémoire.
Pour en savoir plus sur les différentes configurations de travailleurs, consultez notre documentation. Les travailleurs en plus grand nombre sont disponibles dans toutes les régions AWS où EMR sans serveur est disponible.