Publié le: Oct 15, 2020
Les tâches d'extraction, de transformation et de chargement (ETL) en streaming dans AWS Glue peuvent désormais lire les données encodées au format Apache Avro. Auparavant, les tâches ETL en streaming pouvaient lire des données sous formats JSON, CSV, Parquet et XML. Avec l'ajout d'Avro, les tâches ETL en streaming prennent désormais en charge tous les mêmes formats que les tâches AWS Glue par lots.
Les tâches ETL de streaming AWS Glue consomment en permanence des données provenant de sources de streaming, nettoient et transforment les données en cours et les rendent disponibles pour analyse en quelques secondes. Apache Avro est un format populaire pour les données de streaming en raison de sa prise en charge de l'évolution du schéma et de la sérialisation et de la désérialisation rapides.
La prise en charge de la lecture au format Apache Avro dans AWS Glue est disponible dans les mêmes régions AWS que AWS Glue.
Pour en savoir plus, informez-vous sur l'ajout des tâches ETL de streaming dans notre documentation.