Amazon Redshift prend désormais en charge Just-In-Time (JIT) ANALYZE pour les tableaux Apache Iceberg
Amazon Redshift annonce aujourd'hui la disponibilité générale de la fonctionnalité Just-In-Time (JIT) ANALYZE pour les tableaux Apache Iceberg, qui permet aux utilisateurs d'exécuter des requêtes analytiques en lecture et en écriture hautes performances sur les tableaux Apache Iceberg du lac de données Redshift. Le format de tableau ouvert Apache Iceberg a été utilisé par de nombreux clients pour simplifier le traitement des données sur des tableaux en expansion et en évolution rapides stockées dans des lacs de données.
Contrairement aux entrepôts de données traditionnels, les lacs de données ne disposent souvent pas de statistiques complètes au niveau des tableaux et des colonnes sur les données sous-jacentes, ce qui rend difficile pour les moteurs de requêtes de choisir les plans d'exécution de requêtes les plus optimaux sans visibilité sur les statistiques des tableaux et des colonnes. Des plans d'exécution de requêtes sous-optimaux peuvent entraîner des performances plus lentes et moins prévisibles.
« JIT ANALYZE » est une nouvelle caractéristique d'Amazon Redshift qui collecte et utilise automatiquement les statistiques des tableaux Iceberg lors de l'exécution des requêtes, éliminant ainsi la collecte manuelle de statistiques tout en fournissant au moteur de requêtes les informations dont il a besoin pour générer des plans d'exécution de requêtes optimaux. Le système utilise une heuristique intelligente pour identifier les requêtes qui bénéficieront des statistiques, gère des structures de données d'esquisse légères et génère des statistiques de haute qualité au niveau des tableaux et des colonnes. JIT ANALYZE fournit des performances prêtes à l'emploi comparables à celles des requêtes dont les statistiques sont précalculées, tout en jetant les bases de nombreuses autres optimisations de performances.
La caractéristique JIT ANALYZE d'Amazon Redshift pour les tableaux Apache Iceberg est désormais disponible dans toutes les régions AWS où Amazon Redshift est disponible. Les utilisateurs n'ont pas besoin d'apporter de modifications ni d'activer de paramètres pour tirer parti de cette nouvelle optimisation des requêtes des lacs de données. Pour commencer, consultez la page de documentation du Guide de gestion d'Amazon Redshift.