AWS Step Functions espande le opzioni delle origini dati e degli output dei dati per Distributed Map

Inserito il: 7 feb 2025

AWS Step Functions ora supporta origini dati e opzioni di output aggiuntive per Distributed Map, offrendo una maggiore flessibilità nei flussi di lavoro di elaborazione parallela su larga scala. Ora Distributed Map può elaborare dati da JSON Lines (JSONL) e da una gamma più ampia di formati di file delimitati archiviati in Amazon S3. Inoltre, offre nuove trasformazioni di output per un maggiore controllo sulla formattazione dei risultati.

AWS Step Functions è un servizio di flusso di lavoro visivo in grado di orchestrare oltre 14.000 azioni API da oltre 220 servizi AWS per creare applicazioni distribuite e carichi di lavoro di elaborazione dati. Grazie a questo aggiornamento è possibile iterare ed elaborare più facilmente diversi set di dati utilizzando Distributed Map di Step Functions. Oltre al supporto esistente per i file JSON e con valori separati da virgola (CSV), ora Distributed Map supporta JSONL e nuovi formati di file delimitati, ad esempio file delimitati da punto e virgola e file delimitati da tabulazioni. In questo modo vengono estese le funzionalità di elaborazione a una gamma più ampia di formati di dati senza pre-elaborazione personalizzata. Le nuove trasformazioni flessibili degli output offrono un maggiore controllo sulla formattazione dei risultati, facilitando l'aggregazione dei risultati e semplificando l'integrazione con i sistemi a valle.

Per iniziare, puoi utilizzare oggi stesso la modalità Distributed Map nella console di AWS Step Functions o leggere questo post del blog. Per saperne di più, consulta la guida per sviluppatori di Step Functions.