Amazon S3 Tables offre ora un percorso semplice ed economico per la modernizzazione dei data lake
Amazon S3 Tables offre ora la migrazione gestita delle tue tabelle da Apache Hive ad Apache Iceberg. Iceberg introduce nel data lake transazioni ACID, evoluzione dello schema e cronologia, ma la dismissione di Hive richiede solitamente la creazione di una pipeline di migrazione per ciascuna tabella, con tempistiche che possono estendersi a diverse settimane. Ora puoi affidare la gestione della migrazione a S3 Tables, ottenendo tabelle Iceberg pronte per le query che mantengono l'ottimizzazione man mano che i dati crescono.
S3 Tables convalida, converte e copia i tuoi dati mentre i carichi di lavoro di produzione continuano a essere eseguiti. Per ridurre i rischi legati alla migrazione, puoi verificare ogni passaggio, sincronizzare le tabelle di destinazione con le modifiche apportate all'origine con la frequenza desiderata oppure eseguire il rollback ai dati di origine. Paghi esclusivamente per i dati copiati dal job, senza alcun costo aggiuntivo per la conversione da Hive a Iceberg, mentre gli oggetti di origine in S3 Intelligent-Tiering mantengono il livello di accesso corrente. Se le tabelle utilizzano la compressione Snappy, S3 Tables le ricomprime in formato Zstandard (ZSTD) e le compatta, riducendo lo spazio di archiviazione e il numero di oggetti e migliorando al contempo le prestazioni delle query.
Per iniziare, visita la Console di gestione AWS oppure utilizza le API di migrazione di Amazon S3 Tables. Nell'Agent Toolkit per AWS è inoltre disponibile una competenza di migrazione per consentire agli agenti IA di orchestrare il flusso di lavoro in modo autonomo. Al momento del lancio, la migrazione gestita di S3 Tables supporta le tabelle Hive registrate in AWS Glue e archiviate in formato Parquet all'interno del medesimo account AWS e della stessa regione AWS. Il servizio è disponibile nelle seguenti regioni AWS: Stati Uniti orientali (Virginia settentrionale, Ohio), Stati Uniti occidentali (Oregon), Asia Pacifico (Mumbai, Singapore, Sydney, Tokyo) ed Europa (Francoforte, Irlanda, Stoccolma). Per informazioni sui prezzi, consulta la pagina dei prezzi di Amazon S3. Per ulteriori informazioni, consulta la pagina di panoramica, la documentazione e il blog di AWS News di Amazon S3 Tables.