Amazon EMR sin servidor presenta los controles de la concurrencia y la puesta en cola de ejecución de trabajos
Amazon EMR sin servidor es una opción sin servidor en Amazon EMR que facilita a los ingenieros y los científicos de datos la ejecución de marcos de análisis de big data de código abierto sin la necesidad de configurar, administrar y escalar clústeres o servidores. Hoy nos complace anunciar el control de admisión de ejecuciones de trabajos en Amazon EMR sin servidor, que admite la concurrencia de ejecuciones de trabajos y los controles de colas.
La concurrencia y la puesta en cola de ejecución de trabajos le permiten configurar el número máximo de ejecuciones de trabajos simultáneos para una aplicación y pone automáticamente en cola todas las demás ejecuciones de trabajos enviadas. Esto evita los errores de ejecución de trabajos que se producen cuando se superan los límites de la API debido a un aumento en el número de envíos de ejecuciones de trabajos o cuando se agotan los recursos debido a que se supera el límite máximo de vCPU simultáneas de una cuenta o aplicación o a que se supera el límite de direcciones IP de una subred subyacente. Las colas de ejecución de trabajos también simplifican la administración de las ejecuciones de trabajos al eliminar la necesidad de crear sistemas complejos de administración de colas para volver a intentar los trabajos fallidos debido a los errores de límite (por ejemplo, el número máximo de vCPU simultáneas, los límites de direcciones IP de subred, etc.). Con esta característica, los trabajos se ponen en cola y se procesan automáticamente a medida que hay espacios de simultaneidad disponibles, lo que garantiza una utilización eficiente de los recursos y evita errores en los trabajos.
La simultaneidad y las colas de ejecución de trabajos de Amazon EMR sin servidor están disponibles en todas las regiones de AWS en las que se ofrece AWS EMR sin servidor, incluidas las regiones de AWS GovCloud (EE. UU.) y excluyendo las regiones de China. Para obtener más información, consulte Concurrencia y puesta en cola de ejecución de trabajos en la documentación de EMR sin servidor.