Amazon Redshift introduce la conservazione a lungo termine delle tabelle di sistema con l'integrazione di Amazon S3 Tables
Amazon Redshift ora supporta la conservazione a lungo termine dei dati delle tabelle di sistema tramite l'integrazione nativa con Amazon S3 Tables. Con questa funzionalità, è possibile configurare la conservazione dei dati delle tabelle di sistema di Redshift oltre l'attuale limite di 7 giorni per soddisfare i propri requisiti di conformità, audit e osservabilità. Una volta abilitata la funzionalità, AWS scrive automaticamente i dati delle tabelle di sistema su S3 Tables in formato Apache Iceberg e gestisce il partizionamento, la compattazione e la conservazione.
Le tabelle di sistema di Redshift vengono utilizzate per monitorare le prestazioni delle query, eseguire l'audit delle attività del data warehouse e soddisfare i requisiti di conformità. In precedenza, per estendere il periodo di conservazione occorreva creare e gestire pipeline ETL (estrazione, trasformazione e caricamento dei dati) personalizzate per coprire la copia dei dati delle tabelle di sistema, con conseguenti oneri di sviluppo e costi operativi continui. La gestione di più data warehouse comportava un'ulteriore complessità, poiché richiedeva di affidarsi alla condivisione dei dati di Redshift per consolidare i dati delle tabelle di sistema di ciascun data warehouse in un'unica posizione centrale ai fini dell'analisi cross-warehouse. Con questa funzionalità, i dati delle tabelle di sistema vengono replicati automaticamente, eliminando la necessità di pipeline ETL personalizzate ed evitando qualsiasi conflitto di risorse con i carichi di lavoro di produzione. Se si gestiscono più data warehouse, è possibile consolidare i relativi dati delle tabelle di sistema in un'unica posizione per l'osservabilità e l'analisi centralizzata tra i vari data warehouse. Poiché i dati sono archiviati nel formato aperto Apache Iceberg, è possibile interrogarli tramite Redshift, Amazon Athena o qualsiasi motore compatibile con Iceberg, oltre a creare dashboard di osservabilità con i servizi AWS o strumenti di terze parti senza ulteriori oneri operativi. Inoltre, AWS Agent Toolkit mette a disposizione apposite skill per interrogare i dati delle tabelle di sistema al fine di evidenziare informazioni sulle prestazioni e raccomandazioni di ottimizzazione.
Questa funzionalità è disponibile per le istanze Amazon Redshift Provisioned RG e RA3 e per Amazon Redshift Serverless nelle seguenti regioni AWS: Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Africa (Città del Capo), Asia-Pacifico (Hong Kong), Asia-Pacifico (Taipei), Asia-Pacifico (Tokyo), Asia-Pacifico (Seul), Asia-Pacifico (Osaka), Asia-Pacifico (Mumbai), Asia-Pacifico (Hyderabad), Asia-Pacifico (Singapore), Asia-Pacifico (Sydney), Asia-Pacifico (Giacarta), Asia-Pacifico (Melbourne), Asia-Pacifico (Malesia), Asia-Pacifico (Thailandia), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stoccolma), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv) e Sud America (San Paolo). Per ulteriori informazioni, consulta la nostra documentazione o leggere il post del blog.