AWS Glue mengumumkan federasi katalog untuk katalog Apache Iceberg jarak jauh
AWS Glue mengumumkan ketersediaan umum federasi katalog untuk katalog Iceberg jarak jauh. Kemampuan ini menyediakan akses langsung dan aman ke tabel Iceberg yang disimpan di Amazon S3 dan dikatalogkan dalam katalog jarak jauh menggunakan mesin analitik AWS.
Dengan federasi katalog, Anda dapat menyatukan ke katalog Iceberg jarak jauh dan menanyakan tabel Iceberg jarak jauh menggunakan mesin analitik AWS pilihan Anda, tanpa memindahkan atau menyalin tabel. Ini menyinkronkan metadata secara real-time di Katalog Data AWS Glue dan katalog jarak jauh saat tim data menanyakan tabel jarak jauh, yang berarti bahwa hasil kueri selalu sepenuhnya mutakhir. Anda sekarang dapat memilih kinerja harga terbaik untuk beban kerja Anda saat menganalisis tabel Iceberg jarak jauh menggunakan mesin analitik AWS pilihan Anda, sambil mempertahankan kontrol keamanan yang konsisten saat menemukan atau menanyakan data. Federasi katalog didukung oleh berbagai macam mesin analitik, termasuk Amazon Redshift, Amazon EMR, Amazon Athena, AWS Glue, mesin pihak ketiga seperti Apache Spark, dan Amazon SageMaker dengan notebook nirserver.
Federasi katalog menggunakan AWS Lake Formation untuk kontrol akses, memungkinkan Anda menggunakan kontrol akses halus, berbagi lintas akun, dan propagasi identitas tepercaya saat berbagi tabel katalog jarak jauh dengan konsumen data lainnya. Federasi katalog terintegrasi dengan implementasi katalog yang mendukung spesifikasi Iceberg REST.
Federasi katalog tersedia di konsol Lake Formation dan menggunakan AWS Glue dan Lake Formation SDK dan API. Fitur ini umumnya tersedia di semua region komersial AWS tempat AWS Glue dan Lake Formation tersedia. Hanya dengan beberapa klik di konsol, Anda dapat menyatukan ke katalog jarak jauh, menemukan basis data dan tabelnya, memberikan izin untuk mengakses data tabel, dan menanyakan tabel Iceberg jarak jauh menggunakan mesin analitik AWS. Untuk mempelajari lebih lanjut, kunjungi dokumentasi.