Publicado en: Nov 4, 2022
Nos complace anunciar la disponibilidad general de las plantillas de trabajo en Amazon EMR en EKS. Las plantillas de trabajo permiten crear y almacenar plantillas para configurar parámetros de aplicaciones de Spark. Esto ayuda a garantizar una configuración uniforme en todas las aplicaciones mediante la reutilización y aplicación de anulaciones de la configuración en canalizaciones de datos.
EMR en EKS aplica la configuración predeterminada de Spark para optimizar el rendimiento de una aplicación cuando los clientes utilizan la API StartJobRun para ejecutar aplicaciones y canalizaciones de datos basadas en Spark. Con las plantillas de trabajo, los ingenieros de datos ahora pueden definir plantillas reutilizables para aplicar personalizaciones adicionales, configurar el ejecutor y la capacidad de computación del controlador, establecer propiedades de seguridad y gobernanza, como roles de IAM, eimagen de Docker personalizada para usar en múltiples aplicaciones y canalizaciones de datos. Además, los clientes también pueden aplicar valores de configuración específicos, lo que evita anulaciones al llamar a la API StartJobRun mediante la plantilla. Las plantillas de trabajo se pueden cifrar de forma opcional con claves maestras administradas por el cliente almacenadas en AWS Key Management Service.
Las plantillas de trabajo ahora se encuentran disponibles de manera general en todas las regiones de AWS en las que se lanzó la característica de EMR en EKS. Para obtener más información sobre cómo utilizar las plantillas de trabajo, consulte nuestra documentación.