AWS Glue ora supporta le viste materializzate basate su Apache Iceberg
AWS Glue ora supporta le viste materializzate, una nuova funzionalità che semplifica il lavoro dei team di dati nel trasformare i dati e accelerare le prestazioni delle query. Le viste materializzate sono tabelle gestite nel catalogo dati di AWS Glue che memorizzano i risultati delle query precalcolati in formato Apache Iceberg e li mantengono automaticamente aggiornati quando i dati di origine cambiano. Questa funzionalità è progettata per consentire ai data engineer e ai team di analisi dei dati di trasformare facilmente i dati in più fasi, dai dati grezzi alle tabelle analitiche finali, riducendo al contempo gli sforzi di progettazione e il sovraccarico operativo.
I clienti possono ora creare viste materializzate utilizzando la sintassi SQL standard di Spark con un programma di aggiornamento dei dati. Il servizio gestisce automaticamente il programma di aggiornamento dei dati, il rilevamento delle modifiche, gli aggiornamenti incrementali e la gestione dell'infrastruttura di calcolo. I motori Spark di Amazon Athena, Amazon EMR e AWS Glue riscrivono in modo intelligente le query per utilizzare queste viste materializzate, accelerando le prestazioni fino a 8 volte e riducendo i costi di calcolo. Puoi utilizzare motori di query SQL come Amazon Athena e Amazon Redshift per accedere alle viste materializzate come tabelle Iceberg dagli editor SQL e dai notebook Amazon SageMaker.
Le viste materializzate in AWS Glue sono disponibili in Europa (Stoccolma), Asia Pacifico (Thailandia), Asia Pacifico (Mumbai), Europa (Parigi), Stati Uniti orientali (Ohio), Europa (Irlanda), Europa (Francoforte), Sud America (San Paolo), Asia Pacifico (Hong Kong), Stati Uniti orientali (Virginia settentrionale), Asia Pacifico (Seoul), Asia Pacifico (Kuala Lumpur), Europa (Londra), Asia Pacifico (Tokyo), Stati Uniti occidentali (Oregon), Stati Uniti occidentali (California settentrionale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Canada (Centrale) ed Europa (Spagna). Per ulteriori informazioni, consulta Lavorare con le viste materializzate nella guida per sviluppatori di AWS Glue.