AWS Step Functions expande as opções de saída e de fonte de dados para mapas distribuídos

Publicado: 7 de fev de 2025

O AWS Step Functions agora oferece suporte a fontes de dados adicionais e opções de saída para mapas distribuídos, permitindo fluxos de trabalho de processamento paralelo em grande escala mais flexíveis. Agora, o mapa distribuído pode processar dados de JSON Lines (JSONL) e de uma variedade maior de formatos de arquivo delimitados armazenados no Amazon S3. Além disso, o mapa distribuído oferece novas transformações de saída para maior controle sobre a formatação dos resultados.

O AWS Step Functions é um serviço de fluxos de trabalho visuais capaz de orquestrar mais de 14.000 ações de API de mais de 220 serviços da AWS para criar workloads de aplicações e processamento de dados distribuídos. Com essa atualização, você pode iterar e processar mais facilmente diversos conjuntos de dados usando o mapa distribuído do Step Functions. Além do suporte existente a arquivos JSON e CSV (valores separados por vírgula), o mapa distribuído agora oferece suporte a JSONL e novos formatos de arquivo delimitados, como arquivos delimitados por ponto e vírgula e arquivos delimitados por tabulação. Isso expande os recursos de processamento para uma variedade maior de formatos de dados sem o pré-processamento personalizado. As novas transformações flexíveis de saída oferecem mais controle sobre como os resultados são formatados, permitindo uma agregação mais fácil de resultados e simplificando a integração com sistemas posteriores.

Você pode começar a usar o modo de mapa distribuído hoje mesmo no console do AWS Step Functions ou ler esta publicação no blog. Para saber mais, acesse o guia do desenvolvedor do Step Functions.