AWS Glue, REST API bağlayıcısı için VPC desteği, aşağı itme filtresi ve bölüm desteğini duyurdu
AWS Glue artık REST API bağlayıcısı için VPC bağlantılarını, aşağı itme filtresi ve bölüm desteğini destekliyor. REST API bağlayıcısı,tescilli sistemler ve yerel AWS Glue bağlayıcıları olmayan gelişmekte olan platformlar da dahil olmak üzere REST tabanlı API'yi ortaya çıkaran herhangi bir kaynaktan veri almanıza olanak tanır. Bu lansmanla ETL işlem hatlarınızı veri kaynaklarından REST API'si uç noktalarıyla özel uç noktalarınızı güvenli bir şekilde bağlayarak, sadece ihtiyaçları olan veriyi aktararak ve daha hızlı alım için okumaları paralelleştirerek hiçbir kod yazmadan çalıştırabilirsiniz.
VPC desteğiyle, trafiği herkese açık internete maruz bırakmadan özel alt ağlarda barındırılan veya VPN'ler veya AWS PrivateLink üzerinden bağlanan veri kaynaklarına erişmek için REST API bağlayıcısını kullanabilirsiniz. Aşağı itme filtresi sorgu yüklemlerinizi API'ye özgü parametrelere çevirir, böylece yalnızca eşleşen kayıtlar kaynaktan ayrılır, veri aktarım maliyetlerini düşürür ve iş performansını iyileştirir. Bölüm desteği, büyük veri kümelerini alan tabanlı veya kayıt sayımı stratejileri kullanarak birden çok Spark çalışanı arasında böler ve yüksek hacimli, sayfalandırılmış API'ler için alım süresini azaltan paralel okumalar sağlar.
Bu özellikler, AWS Glue'nun kullanılabildiği tüm AWS ticari bölgelerinde kullanılabilir.
Başlamak için AWS Glue REST API bağlayıcısı belgelerini ziyaret edin.