AWS Step Functions amplía las opciones de origen de datos y mejora la observabilidad de los mapas distribuídos
AWS Step Functions ahora admite fuentes de datos adicionales y nuevas métricas de observabilidad para Distributed Map (mapas distribuídos). AWS Step Functions es un servicio de flujo de trabajo visual capaz de organizar más de 14 000 acciones de API de más de 220 servicios de AWS para crear cargas de trabajo de procesamiento de datos y aplicaciones distribuidas. El mapa distribuido es un estado de tarea de Step Functions que ejecuta el mismo proceso para varias entradas de un conjunto de datos.
Con esta actualización, Distributed Map ahora admite entradas de datos adicionales, por lo que puede organizar flujos de trabajo de ETL y análisis a gran escala. Ahora puede procesar los archivos de manifiesto de datos de AWS Athena y Parquet directamente, iterar sobre objetos de S3 con un prefijo específico mediante S3ListObjectSv2, leer objetos JSON y extraer de forma nativa datos de matrices de objetos JSON de Amazon S3 o entradas de estado, lo que elimina la necesidad de un preprocesamiento personalizado. Ahora también puedes obtener visibilidad de tu uso del Mapa Distribuido con las siguientes métricas, como Conteo aproximado de ejecuciones de mapa abiertas, Límite de ejecuciones de mapa abiertas y Tamaño aproximado de la acumulación de ejecuciones de mapa.
Las nuevas fuentes de entrada y la capacidad de observación mejorada para el mapa distribuido están disponibles en todas las regiones comerciales de AWS en las que está disponible AWS Step Functions. Para empezar, puede usar el modo de mapa distribuido hoy mismo en la consola de AWS Step Functions. Para obtener más información, consulte la guía para desarrolladores de Step Functions.