Amazon EMR sur EC2 améliore l'expérience de lancement des clusters grâce à une sélection intelligente des sous-réseaux
À compter d'aujourd'hui, Amazon EMR sur EC2 offre une fiabilité et une expérience de lancement de clusters améliorées, par exemple pour les clusters de flottes grâce à une sélection améliorée des sous-réseaux. Grâce à cette fonctionnalité, EMR sur EC2 réduit les échecs de lancement de clusters dus à des pénuries d'adresses IP.
Amazon EMR est une plateforme cloud de big data dédiée au traitement des données, à l'analyse interactive et au machine learning, qui s'appuie sur des frameworks open source tels qu'Apache Spark, Apache Hive et Presto. Auparavant, la sélection des sous-réseaux pour les clusters EMR ne prenait en compte que les adresses IP disponibles pour la flotte d'instances de base. Amazon EMR utilise désormais le filtrage des sous-réseaux au lancement du cluster et sélectionne l'un des sous-réseaux dont les adresses IP disponibles sont adéquates pour lancer correctement toutes les flottes d'instances. Si EMR ne trouve pas de sous-réseau avec suffisamment d'adresses IP pour lancer l'ensemble du cluster, il donnera la priorité au sous-réseau qui peut au moins lancer les flottes d'instances de base et principales. Dans ce scénario, EMR publiera également un événement d'avertissement CloudWatch pour avertir l'utilisateur. Si aucun des sous-réseaux configurés ne peut être utilisé pour approvisionner la flotte de base et principale, EMR échouera lors du lancement du cluster et provoquera un événement d'erreur critique. Ces événements CloudWatch vous permettent de surveiller vos clusters et de prendre des mesures correctives si nécessaire.
Les clients bénéficieront de cette fonctionnalité sur toutes les versions 5.12.1 et ultérieures d'EMR lors du lancement de clusters de flottes d'instances EMR à l'aide de stratégies d'allocation. Aucune autre action n'est nécessaire de leur part. Cette fonctionnalité est disponible dans toutes les régions AWS, y compris les régions AWS GovCloud (US), où Amazon EMR sur EC2 est disponible. Pour en savoir plus, consultez la documentation ici.