Sunucusuz Veri Entegrasyonu - AWS Glue Fiyatlandırması

AWS Glue ile, gezginler (veri keşfi) ile ayıkla, dönüştür ve yükle (ETL) işleri (veri işleme ve yükleme) için saniye bazında faturalanan saatlik bir ücret ödersiniz. AWS Glue Veri Kataloğu için, meta verileri depolama ve bunlara erişme karşılığında yalnızca aylık bir ücret ödersiniz. Depolanan ilk bir milyon nesne ve ilk bir milyon erişim ücretsizdir. ETL kodunuzu etkileşimli olarak geliştirmek üzere bir geliştirme uç noktası hazırlıyorsanız saniye bazında faturalanan saatlik bir ücret ödersiniz. AWS Glue DataBrew için etkileşimli oturumlar oturum başına faturalandırılır, DataBrew işleri ise dakika başına faturalandırılır. AWS Glue Şema Kayıt Defteri kullanımı için ek ücret alınmamaktadır.

Not: Fiyatlandırma AWS Bölgesine göre farklılık gösterebilir.

ETL işleri ve etkileşimli oturumlar
Fiyatlandırma örnekleri

ETL işi: 15 dakika boyunca çalışan ve 6 DPU kullanan bir AWS Glue Apache Spark işi düşünün. 1 DPU saatinin fiyatı 0,44 USD'dir. İşiniz 1/4 saat sürdüğü ve 6 DPU kullandığı için AWS sizi 6 DPU * 1/4 saat * 0,44 USD şeklinde veya 0,66 USD olarak faturalandıracaktır.

AWS Glue Studio İş Not Defterleri ve Etkileşimli Oturumlar: ETL kodunuzu etkileşimli olarak geliştirmek için AWS Glue Studio'da bir not defteri kullandığınızı varsayalım. Bir etkileşimli oturum varsayılan olarak 5 DPU'ya sahiptir. Oturumu 24 dakika (veya bir saatin 2/5'i kadar) çalıştırırsanız DPU saati başına 0,44 USD fiyattan 5 DPU * 2/5 saat şeklinde veya 0,88 USD olarak faturalandırılırsınız.

Makine Öğrenimi Dönüşümleri: AWS Glue işlerinin çalıştırılmasına benzer olarak verileriniz üzerinde FindMatches dahil olmak üzere makine öğrenimi dönüşümlerini çalıştırma maliyeti; verilerinizin boyutuna, içeriğine ve kullandığınız düğümlerin sayısıyla türüne göre değişiklik gösterir. Aşağıdaki örnekte, birden çok veri kaynağındaki ilgi çekici bilgileri entegre etmek için FindMatches'ı kullandık. G.2x türündeki 16 bulut sunucusu üzerinde çalışan yaklaşık 11.000.000 satır (1,6 GB) boyutundaki veri kümesi ve yaklaşık 8.000 satır (641 KB) boyutundaki Etiket verileri (gerçek eşleşme ve gerçek eşleşmeme örnekleri) ile etiket kümesi oluşturma çalışma zamanı 8,23 USD maliyetle 34 dakikada, ölçüm tahmini çalışma zamanı 2,66 USD maliyetle 11 dakikada ve FindingMatches işi yürütme işlemi çalışma zamanı 7,75 USD maliyetle 32 dakikada tamamlanır.
Veri Kataloğu
Fiyatlandırma örnekleri

AWS Glue Veri Kataloğu ücretsiz kullanımı: Belirli bir ayda Veri Kataloğunuzda bir milyon tablo depoladığınızı ve bu tablolara erişmek için 1 milyon istekte bulunduğunuzu düşünelim. 0 USD ödersiniz çünkü kullanımınız AWS Glue Veri Kataloğu ücretsiz kullanımı kapsamına girer. Bir ayda ücretsiz olarak bir milyon nesneyi depolayabilir ve bir milyon istekte bulunabilirsiniz.

AWS Glue Veri Kataloğu: Şimdi aylık depolama kullanımınızın 1 milyon tabloda kaldığını ama isteklerinizin iki katına çıktığını ve aylık 2 milyon isteğe ulaştığınızı düşünün. Ayrıca yeni tabloları bulmak için gezginleri kullandığınızı, bunların 30 dakika çalıştırıldığını ve 2 DPU kullandığını varsayalım.

Depolama maliyetiniz yine 0 USD olur çünkü ilk bir milyon tablonuz ücretsizdir. İlk bir milyon isteğiniz de ücretsizdir. Ücretsiz kullanımın üzerindeki 1 milyon istek için faturalandırılırsınız ve bunun ücreti 1 USD'dir. Gezginler, DPU saati başına 0,44 USD oranında faturalandırılır ve dolayısıyla 0,44 USD fiyattan 2 DPU * 1/2 saat kadar veya 0,44 USD ödersiniz.

Glue tablolarında istatistik oluşturursanız ve istatistiklerin çalışması 10 dakika sürer ve 1 DPU tüketirse 1 DPU * 1/6 saat * 0,44 USD/DPU-saat fatura edilir. Bu da 0,07 USD'ye eşittir.

Apache Iceberg tablolarını sıkıştırdığınızda sıkıştırma 30 dakika çalışırsa ve 2 DPU tüketirseniz, 2 DPU * 1/2 saat * 0,44 USD/DPU-saat fatura edilir. Bu da 0,44 USD'ye eşittir.
Gezginler
DataBrew etkileşimli oturumları
Fiyatlandırma örnekleri

AWS Glue DataBrew: Her bir 30 dakikalık etkileşimli oturum ücreti 1,00 USD'dir. Bir oturumu 09:00'da başlatır, hemen konsoldan ayrılır ve 09:20 - 09:30'da dönerseniz bu, 1 oturum kullanır ve toplam 1,00 USD faturalandırılırsınız.

Bir oturumu 09:00'da başlatır ve 09:50'ye kadar DataBrew konsoluyla etkileşim kurar, DataBrew proje alanından çıkar ve 10:15'te geri gelerek son kez etkileşimde bulunursanız bu 3 oturum kullanır ve oturum başına 1,00 USD olmak üzere toplam 3,00 USD faturalandırılırsınız.
DataBrew işleri
Fiyatlandırma örnekleri

AWS Glue DataBrew: Bir DataBrew işinin 10 dakika boyunca çalışması ve 5 DataBrew düğümü kullanılması durumunda ücret 0,40 USD olur. İşiniz bir saatin 1/6'sı kadar çalıştığı ve 5 düğüm kullandığı için düğüm saati başına 0,48 USD fiyattan 5 düğüm * 1/6 saat kadar, yani toplamda 0,40 USD faturalandırılırsınız.
Veri Kalitesi
Fiyatlandırma örnekleri

Örnek 1 - Veri Kataloğu'nda bir tablo için öneriler alın

Örneğin, 10 dakikada tamamlanan 5 DPU'lu bir öneri görevi düşünün. 0,44 USD fiyattan 5 DPU * 1/6 saat için toplamda 0,37 USD ödersiniz.

Örnek 2 - Veri Kataloğu'nda bir tablonun veri kalitesini değerlendirin

Önerileri inceledikten sonra gerekirse düzenleyebilir ve ardından DPU'lar tedarik ederek veri kalitesi görevini planlayabilirsiniz. Örneğin, 20 dakikada tamamlanan 5 DPU’lu bir veri kalitesi değerlendirme görevi düşünün.

0,44 USD fiyattan 5 DPU * 1/3 saat için toplamda 0,73 USD ödersiniz.

Örnek 3 – AWS Glue ETL işinde veri kalitesini değerlendirin

Veri göllerinize kötü verilerin girmesini önlemek için bu veri kalitesi kontrollerini AWS Glue ETL işlerinize de ekleyebilirsiniz. Bunu, AWS Glue Studio’da Veri Kalitesi Dönüştürme ekleyerek veya AWS Glue Studio not defterlerinde yazdığınız kod içinde AWS Glue API’lerini kullanarak yapabilirsiniz. 6 DPU ile 20 dakika (1/3 saat) yürütülen, işlem hattı dâhilinde veri kalitesi kurallarının yapılandırıldığı yerde çalışan bir AWS Glue işi düşünün. 0,44 USD fiyattan 6 DPU * 1/3 saat için toplamda 0,88 USD ücretlendirilirsiniz. Alternatif olarak, 0,29 USD fiyattan 6 DPU * 1/3 saat (0,58 USD’ye eşittir) için ücretlendirileceğiniz Flex’i kullanabilirsiniz.