Amazon EMR sans serveur introduit les contrôles de simultanéité et de mise en file d'attente d'exécution des tâches

Publié le: 1 oct. 2024

Amazon EMR sans serveur est une option sans serveur d'Amazon EMR qui permet aux ingénieurs et aux spécialistes des données d'exécuter facilement des cadres d'analytique du big data open source sans avoir à configurer, gérer ni dimensionner des clusters ou des serveurs. Aujourd'hui, nous sommes ravis d'annoncer le contrôle d'admission des tâches exécutées sur Amazon EMR sans serveur, avec prise en charge de la simultanéité des tâches exécutées et des contrôles de mise en file d'attente.

La simultanéité et la mise en file d'attente d'exécution des tâches vous permettent de configurer le nombre maximum d'exécutions simultanées pour une application et mettent automatiquement en file d'attente toutes les autres exécutions de tâches soumises. Cela permet d'éviter les échecs d'exécution des tâches provoqués lorsque les limites de l'API sont dépassées en raison d'un pic de soumissions de tâches ou lorsque les ressources sont épuisées en raison de la limite maximale de processeurs virtuels simultanés d'un compte ou d'une application ou du dépassement de la limite d'adresses IP d'un sous-réseau sous-jacent. La mise en file d'attente des tâches simplifie également la gestion des exécutions des tâches en éliminant la nécessité de créer des systèmes de gestion des files d'attente complexes pour réessayer les tâches ayant échoué en raison d'erreurs de limite (p. ex., nombre maximal de processeurs virtuels simultanés, limites d'adresses IP de sous-réseau, etc.). Grâce à cette fonctionnalité, les tâches sont automatiquement mises en file d'attente et traitées à mesure que des créneaux de simultanéité deviennent disponibles, ce qui garantit une utilisation efficace des ressources et prévient les échecs de tâches.

La simultanéité d'exécution des tâches et la mise en file d'attente Amazon EMR sans serveur sont disponibles dans toutes les régions AWS où AWS EMR sans serveur est disponible, y compris les régions AWS GovCloud (US) et à l'exception des régions de Chine. Pour en savoir plus, consultez la section Concurrence des tâches et mise en file d'attente dans la documentation EMR sans serveur.