Memperkenalkan AWS Glue 5.1
AWS Glue 5.1 sekarang tersedia secara umum, memberikan peningkatan kinerja, pembaruan keamanan, kemampuan Apache Iceberg yang diperluas, dan dukungan penulisan AWS Lake Formation untuk beban kerja integrasi data.
AWS Glue adalah layanan integrasi data nirserver dan dapat diskalakan yang menyederhanakan menemukan, menyiapkan, memindahkan, dan mengintegrasikan data dari berbagai sumber. Rilis ini meningkatkan mesin inti ke Apache Spark 3.5.6, Python 3.11, dan Scala 2.12.18, membawa peningkatan kinerja dan keamanan. Ini juga memperbarui dukungan untuk pustaka format tabel terbuka, termasuk Apache Hudi 1.0.2, Apache Iceberg 1.10.0, dan Delta Lake 3.3.2.
AWS Glue 5.1 memperkenalkan dukungan untuk format Apache Iceberg versi 3.0, menambahkan nilai kolom default, vektor penghapusan untuk tabel merge-on-read, transformasi multi-argumen, dan pelacakan garis turunan baris. Rilis ini juga memperluas kontrol akses terperinci AWS Lake Formation untuk menulis operasi (baik DML maupun DDL) untuk Spark DataFrames dan Spark SQL. Sebelumnya, kemampuan ini terbatas pada operasi baca saja. AWS Glue 5.1 juga menambahkan kontrol akses tabel penuh di Apache Spark untuk tabel Apache Hudi dan Delta Lake, memberikan opsi keamanan yang lebih komprehensif untuk data Anda.
AWS Glue 5.1 tersedia di AS Timur (Virginia Utara), AS Timur (Ohio), AS Barat (Oregon), Eropa (Irlandia), Eropa (Stockholm), Eropa (Frankfurt), Eropa (Spanyol), Asia Pasifik (Hong Kong), Asia Pasifik (Singapura), Asia Pasifik (Sydney), Asia Pasifik (Tokyo), Asia Pasifik (Malaysia), Asia Pasifik (Thailand), Asia Pasifik (Mumbai), dan Amerika Selatan (Sao Paulo)). Buka dokumentasi AWS Glue untuk informasi selengkapnya.