AWS Glue prend désormais en charge la fédération de catalogues pour les catalogues Apache Iceberg distants dans les Régions AWS GovCloud (US)
AWS Glue prend désormais en charge la fédération de catalogues pour les catalogues Iceberg REST distants dans les Régions AWS GovCloud (US). Cette fonctionnalité donne un accès direct et sécurisé aux tableaux Iceberg stockés dans Amazon S3 et cataloguées dans des catalogues distants à l'aide des moteurs d'analytique AWS.
Grâce à la fédération des catalogues, vous pouvez effectuer des fédérations vers des tableaux Iceberg dans des catalogues distants à l'aide de vos moteurs d'analytique AWS préférés, sans déplacer ni copier les tableaux. Elle synchronise les métadonnées en temps réel entre le Catalogue de données AWS Glue et le catalogue distant lorsque les équipes chargées des données interrogent des tableaux Iceberg, ce qui signifie que les résultats des requêtes sont toujours à jour avec les dernières métadonnées. Vous pouvez désormais choisir le meilleur rapport prix/performances pour vos charges de travail lorsque vous analysez des tables Iceberg distantes à l'aide de vos moteurs d'analytique AWS préférés, tout en maintenant des contrôles de sécurité cohérents lors de la découverte ou de l'interrogation de données. La fédération de catalogues est prise en charge par de nombreux moteurs d'analytique, notamment Amazon Redshift, Amazon EMR, Amazon Athena, AWS Glue et des moteurs tiers tels qu'Apache Spark.
La fédération de catalogues utilise AWS Lake Formation pour les contrôles d'accès, ce qui vous permet d'utiliser des contrôles d'accès précis, le partage entre comptes et une propagation d'identité fiable lorsque vous partagez des tables de catalogue distantes avec d'autres consommateurs de données. La fédération de catalogues s'intègre aux implémentations de catalogues qui prennent en charge les spécifications REST d'Iceberg.
La fédération de catalogues est disponible dans la console Lake Formation et à l'aide des kits SDK et API AWS Glue et Lake Formation. Cette caractéristique est désormais disponible dans les Régions AWS GovCloud (US, côte est) et AWS GovCloud (US, côte ouest). Pour en savoir plus, consultez la documentation.