Amazon EMR, Lake Formation tabloları için tam tablo erişimine sahip gelişmiş Apache Spark özelliklerini sunar
Amazon EMR artık iş rolü tam tablo erişimine sahip olduğunda, AWS Lake Formation kayıtlı tablolarındaki Apache Spark işlerinden okuma ve yazma işlemlerini destekliyor. Bu özellik, Apache Hive ve Iceberg tablolarında CREATE, ALTER, DELETE, UPDATE ve MERGE INTO ifadelerini içeren Veri Manipülasyonu Dili (DML) işlemlerini aynı Apache Spark uygulaması içinden etkinleştirir.
Lake Formation'daki ayrıntılı erişim denetimi (FGAC) satır, sütun ve hücre düzeylerinde ayrıntılı güvenlik kontrolleri sunarken birçok ETL iş yükünün tam tablo erişimine ihtiyacı vardır. Bu yeni özellik, Apache Spark'ın tam tablo erişimi verildiğinde verileri doğrudan okuyup yazabilmesini sağlayarak daha önce belirli ETL işlemlerini kısıtlayan FGAC sınırlamalarını ortadan kaldırır. Lake Formation tabloları sayesinde artık RDD'ler, özel kitaplıklar, UDF'ler ve özel görüntüler (EC2'de EMR için AMI'ler, EMR Sunucusuz için özel görüntüler) dahil gelişmiş Spark özelliklerinden yararlanabilirsiniz. Ek olarak, veri ekipleri, Lake Formation'ın tablo düzeyindeki güvenlik sınırlarını korurken uyumluluk modunda SageMaker Unified Studio aracılığıyla karmaşık ve etkileşimli Spark uygulamalarını çalıştırabilir.
Bu özellik, Amazon EMR ve AWS Lake Formation'ın desteklendiği tüm AWS Bölgelerinde kullanılabilir.
Bu özellik hakkında daha fazla bilgi için EMR Sunucusuz belgelerindeki Lake Formation filtresiz erişimi bölümünü ziyaret edin.