AWS Step Functions étend les options de source de données et de sortie pour Distributed Map

Publié le: 7 févr. 2025

AWS Step Functions prend désormais en charge des sources de données et des options de sortie supplémentaires pour Distributed Map, permettant ainsi des flux de travail de traitement parallèle à grande échelle plus flexibles. La carte distribuée peut désormais traiter les données issues de lignes JSON (JSONL) et d'une gamme plus étendue de formats de fichiers délimités stockés dans Amazon S3. En outre, la carte distribuée propose de nouvelles transformations de sortie pour un meilleur contrôle du formatage des résultats.

AWS Step Functions est un service de flux de travail visuel capable d'orchestrer plus de 14 000 actions d'API provenant de plus de 220 services AWS afin de créer des applications distribuées et des charges de travail de traitement de données. Grâce à cette mise à jour, vous pouvez plus facilement itérer et traiter divers jeux de données à l'aide de la carte distribuée Step Functions. Outre la prise en charge existante des fichiers JSON et CSV (valeurs séparées par des virgules), la carte distribuée prend désormais en charge le format JSONL et les nouveaux formats de fichiers délimités, tels que les fichiers séparés par des points-virgules et les fichiers séparés par des tabulations. Cela étend les capacités de traitement à un plus large éventail de formats de données sans prétraitement personnalisé. Les nouvelles transformations de sortie flexibles vous permettent de mieux contrôler la mise en forme des résultats, ce qui facilite l'agrégation des résultats et simplifie l'intégration avec les systèmes en aval.

Pour commencer, vous pouvez utiliser le mode carte distribuée dès aujourd'hui dans la console AWS Step Functions ou lire cet article de blog. Pour en savoir plus, consultez le Guide du développeur de Step Functions.