I metadati Amazon S3 ora supportano gli oggetti esistenti e riducono i prezzi fino al 33%
I metadati Amazon S3 creano e gestiscono metadati con informazioni sui set di dati archiviati in S3 in modo da poter scoprire e utilizzare più facilmente i dati presenti in S3. In precedenza i metadati S3 supportavano oggetti nuovi e aggiornati, mentre ora creano e gestiscono anche i metadati per tutti i dati S3 esistenti consentendo di eseguire query SQL sui metadati indipendentemente dalla quantità di archiviazione di S3.
I metadati S3 creano e gestiscono due tabelle Apache Iceberg che offrono una vista interrogabile e costantemente aggiornata dei metadati associati a un bucket S3. Una tabella journal registra le modifiche apportate ai dati quasi in tempo reale, aiutando a individuare i nuovi dati caricati nel bucket, a tracciare gli oggetti eliminati di recente, a monitorare le transizioni del ciclo di vita e ad altro ancora. Una nuova tabella di inventario in tempo reale fornisce e mantiene una vista aggiornata di tutti gli oggetti nel bucket. Entrambe le tabelle di metadati S3 sono archiviate in un bucket di tabelle Iceberg gestito da AWS nel proprio account e possono essere interrogate con query SQL standard tramite i servizi di analisi di AWS come Amazon Athena o Amazon EMR, nonché usando strumenti open source come DuckDB e PyIceberg.
I metadati S3 sono attualmente disponibili nelle regioni Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio) e Stati Uniti occidentali (Oregon). Viene addebitata una piccola commissione per ogni modifica al set di dati sottostante registrato nelle tabelle del journal dei metadati S3. Da oggi i prezzi della tabella journal vengono ridotti del 33% per rendere più convenienti il monitoraggio delle modifiche in tempo reale e il backfilling (popolamento retroattivo dei dati) per i set di dati di grandi dimensioni. Inoltre, viene addebitata una piccola commissione per ogni oggetto elaborato durante il popolamento delle tabelle di inventario attive con informazioni sui set di dati S3 esistenti. Per ulteriori dettagli vai alla pagina dei prezzi di Amazon S3. Per saperne di più e iniziare, consulta la pagina del prodotto, la relativa documentazione e il blog AWS News.