Amazon EMR 7.12 artık Apache Iceberg v3 tablo formatını destekliyor
Amazon EMR 7.12, yeni Apache Iceberg v3 tablo formatını içeren Apache Iceberg 1.10 ile birlikte kullanıma sunuldu. Bu sürüm, verileri silerken maliyetleri azaltmanıza, satır düzeyinde değişiklikler için daha iyi izleme yoluyla yönetişimi ve uyumluluğu güçlendirmenize ve daha ayrıntılı veri erişim denetimi ile veri güvenliğini artırmanıza olanak tanır.
Iceberg v3 silinen satırları tüm dosyaları yeniden yazmadan işaretlediğinden Iceberg v3 ile verileri uygun maliyetli bir şekilde silebilirsiniz. Bu, depolama maliyetlerini düşürürken veri akışlarınızı hızlandırır. Her satırın oluşturma ve değişiklik geçmişini otomatik olarak izleyerek, yasal gereklilikler için gerekli denetim izlerini oluşturarak ve değişiklik verilerini yakalama yoluyla daha iyi yönetişim ve uyumluluk özellikleri elde edersiniz. Tablo düzeyinde şifreleme ile veri güvenliğini artırarak hassas verileriniz için gizlilik düzenlemelerini karşılayabilirsiniz.
Bu sürümde yer alan Apache Spark 3.5.6 ile Amazon S3 üzerinde sağlam veri gölü mimarileri oluşturmak için Iceberg 1.10 özelliklerinden yararlanabilirsiniz. Bu sürüm ayrıca AWS Lake Formation'u kullanarak Iceberg tablolarınızda veri yönetişimi işlemleri için destek de içerir. Ayrıca bu sürüm Apache Trino 476'yı da içerir.
Amazon EMR 7.12, Amazon EMR'yi destekleyen tüm AWS Bölgelerinde kullanılabilir. Amazon EMR 7.12 sürümü hakkında daha fazla bilgi edinmek için Amazon EMR 7.12 sürüm belgelerini ziyaret edin.