AWS Step Functions étend les options de source de données et améliore l'observabilité pour les cartes distribuées
AWS Step Functions prend désormais en charge des sources de données supplémentaires et de nouvelles mesures d'observabilité pour Distributed Map. AWS Step Functions est un service de flux de travail visuel capable d'orchestrer plus de 14 000 actions d'API provenant de plus de 220 services AWS afin de créer des applications distribuées et des charges de travail de traitement de données. Distributed Map est un état de tâche de Step Functions qui exécute le même processus pour plusieurs entrées d'un jeu de données.
Avec cette mise à jour, Distributed Map prend désormais en charge des entrées de données supplémentaires, afin que vous puissiez orchestrer des analyses à grande échelle et des flux de travail ETL. Vous pouvez désormais traiter directement le manifeste de données AWS Athena et les fichiers Parquet, itérer sur des objets S3 sous un préfixe spécifié à l'aide de S3ListObjectsV2, lire à partir d'objets JSON et extraire nativement des données de tableau depuis un objet JSON depuis Amazon S3 ou une entrée d'état, éliminant ainsi le besoin d'un prétraitement personnalisé. Vous bénéficiez également désormais d'une visibilité sur l'utilisation de votre carte distribuée grâce aux mesures suivantes, telles que le nombre approximatif de courses sur des cartes ouvertes, la limite de courses sur des cartes ouvertes et la taille approximative du backlog de courses de cartes.
De nouvelles sources d'entrée et une meilleure observabilité pour Distributed Map sont disponibles dans toutes les régions AWS commerciales où AWS Step Functions est disponible. Pour commencer, vous pouvez utiliser le mode Carte distribuée dès aujourd'hui dans la console AWS Step Functions. Pour en savoir plus, consultez le Guide du développeur de Step Functions.