AWS Glue memungkinkan kemampuan Apache Spark yang ditingkatkan untuk tabel AWS Lake Formation dengan akses tabel penuh
AWS Glue kini mendukung operasi baca dan tulis dari pekerjaan AWS Glue 5.0 Apache Spark pada tabel terdaftar AWS Lake Formation saat peran pekerjaan memiliki akses tabel penuh. Kemampuan ini mengaktifkan operasi Bahasa Manipulasi Data (DML) termasuk pernyataan CREATE, ALTER, DELETE, UPDATE, dan MERGE INTO pada tabel Apache Hive dan Iceberg dari dalam aplikasi Apache Spark yang sama.
Sementara kontrol akses terperinci (FGAC) Lake Formation menawarkan kontrol keamanan terperinci di tingkat baris, kolom, dan sel, banyak beban kerja ETL hanya memerlukan akses tabel penuh. Fitur baru ini memungkinkan pekerjaan AWS Glue 5.0 Spark untuk langsung membaca dan menulis data saat akses tabel penuh diberikan, menghapus batasan yang sebelumnya membatasi operasi Extract, Transform, and Load (ETL) tertentu. Anda sekarang dapat memanfaatkan kemampuan Spark tingkat lanjut termasuk Resilient Distributed Datasets (RDD), pustaka kustom, dan User Defined Functions (UDF) dengan tabel Lake Formation. Selain itu, tim data dapat menjalankan aplikasi Spark yang kompleks dan interaktif melalui SageMaker Unified Studio dalam mode kompatibilitas sambil mempertahankan batasan keamanan tingkat tabel Lake Formation.
Fitur ini tersedia di semua AWS Region tempat AWS Glue dan AWS Lake Formation didukung. Untuk mempelajari lebih lanjut, kunjungi halaman produk AWS Glue dan dokumentasi.