Publicado en: Feb 13, 2024

Hoy, Amazon EMR en EC2 anunció una mejora en las API DescribeStep y ListStep para permitir a los clientes ver hasta 10 000 pasos completados en los últimos 7 días. Esto implica un aumento con respecto al límite anterior de 1000 pasos. El servicio también seguirá siendo compatible con la recuperación de 1000 pasos de los últimos dos meses. Estas mejoras de la API proporcionan una mayor visibilidad de los pasos completados y facilitan la supervisión y la administración del flujo de trabajo de los pasos.

Amazon EMR es una plataforma de macrodatos en la nube destinada al procesamiento de datos, los análisis interactivos y el machine learning mediante el uso de marcos de código abierto, como Apache Spark, Presto, Trino y Apache Flink. Esta mejora simplifica la experiencia para los clientes con un mayor número de pasos cortos de ejecución, ya que proporciona una forma simplificada de revisar y conciliar el estado de sus pasos para garantizar su ejecución adecuada y ayudar con la depuración. Si el clúster recibe más de 10 000 pasos en un período de 7 días, los pasos inactivos enviados por el usuario en los estados COMPLETED (COMPLETADO), CANCELLED (CANCELADO) o FAILED (CON ERROR) se eliminarán en orden cronológico, empezando por los más antiguos.

Esta mejora es compatible con todas las versiones de EMR y está disponible en todas las regiones de AWS en las que está disponible Amazon EMR. No es necesario que realice ninguna otra acción. Para obtener más información sobre cómo ver los pasos, consulte la documentación sobre la Visualización de pasos y la API DescribeStep