AWS Glue, Lake Formation tabloları için tam tablo erişimine sahip gelişmiş Apache Spark özelliklerini sunar
AWS Glue artık iş rolü tam tablo erişimine sahip olduğunda, AWS Lake Formation kayıtlı tablolarındaki AWS Glue 5.0 Apache Spark işlerinden okuma ve yazma işlemlerini destekliyor. Bu özellik, Apache Hive ve Iceberg tablolarında CREATE, ALTER, DELETE, UPDATE ve MERGE INTO ifadelerini içeren Veri Manipülasyonu Dili (DML) işlemlerini aynı Apache Spark uygulaması içinden etkinleştirir.
Lake Formation'daki ayrıntılı erişim denetimi (FGAC) satır, sütun ve hücre düzeylerinde ayrıntılı güvenlik kontrolleri sunarken birçok ETL iş yükünün tam tablo erişimine ihtiyacı vardır. Bu yeni özellik, AWS Glue 5.0 Spark işlerinin tam tablo erişimi verildiğinde doğrudan veri okumasını ve yazmasını sağlayarak önceden belirli Ayıklama, Dönüştürme ve Yükleme (ETL) işlemlerini kısıtlayan sınırlamaları ortadan kaldırır. Lake Formation tablolarıyla artık Dayanıklı Dağıtılmış Veri Kümeleri (RDD), özel kitaplıklar ve Kullanıcı Tanımlı İşlevler (UDF) dahil geliştirilmiş Spark özelliklerinden yararlanabilirsiniz. Ek olarak, veri ekipleri, Lake Formation'ın tablo düzeyindeki güvenlik sınırlarını korurken uyumluluk modunda SageMaker Unified Studio aracılığıyla karmaşık ve etkileşimli Spark uygulamalarını çalıştırabilir.
Bu özellik, AWS Glue ve AWS Lake Formation'ın desteklendiği tüm AWS Bölgelerinde kullanılabilir. Daha fazla bilgi için AWS Glue ürün sayfasını ve belgeleri ziyaret edin.