AWS Glue ora supporta la federazione dei cataloghi per i cataloghi remoti di Apache Iceberg nelle regioni AWS GovCloud (Stati Uniti).
AWS Glue ora supporta la federazione dei cataloghi per i cataloghi REST Iceberg remoti nelle regioni AWS GovCloud (Stati Uniti). Questa funzionalità consente l'accesso diretto e sicuro alle tabelle Iceberg archiviate in Amazon S3 e catalogate in cataloghi remoti mediante i motori di analisi AWS.
La federazione dei cataloghi permette di connettersi a cataloghi Iceberg remoti ed eseguire query sulle tabelle Iceberg remote mediante i motori di analisi AWS di propria preferenza, senza dover spostare o duplicare le tabelle. Sincronizza i metadati in tempo reale tra il Catalogo dati AWS Glue e il catalogo remoto quando i team di dati interrogano le tabelle Iceberg, il che significa che i risultati delle query sono sempre aggiornati con i metadati più recenti. È ora possibile ottimizzare il rapporto prezzo-prestazioni per i propri carichi di lavoro nell'analisi di tabelle Iceberg remote mediante i motori di analisi AWS preferiti, garantendo al contempo controlli di sicurezza uniformi nelle operazioni di scoperta ed esecuzione di query sui dati. La federazione dei cataloghi è supportata da un'ampia gamma di motori di analisi, tra cui Amazon Redshift, Amazon EMR, Amazon Athena, AWS Glue e motori di terze parti come Apache Spark.
La federazione dei cataloghi utilizza AWS Lake Formation per il controllo degli accessi, consentendo di utilizzare controlli di accesso granulari, condivisione tra account e propagazione affidabile delle identità quando si condividono tabelle di catalogo remote con altri consumatori di dati. La federazione dei cataloghi si integra con le implementazioni di catalogo che supportano le specifiche REST di Iceberg.
La federazione dei cataloghi è disponibile nella console di Lake Formation e tramite gli SDK e le API di AWS Glue e Lake Formation. Questa funzionalità è ora disponibile nelle regioni AWS GovCloud (Stati Uniti-Est) e AWS GovCloud (Stati Uniti-Ovest). Per ulteriori informazioni, consulta la documentazione.