Amazon Data Firehose, veri tabanı değişikliklerinin Amazon S3'teki Apache Iceberg Tablolarına sürekli olarak çoğaltılmasını destekliyor
Amazon Data Firehose artık veri tabanı değişikliklerinin Amazon S3'teki Apache Iceberg Tablolarında yakalanmasını ve çoğaltılmasını sağlıyor (Önizleme). Bu yeni özellik, müşterilerin MySQL ve PostgreSQL veri tabanlarından gerçek zamanlı verileri doğrudan Apache Iceberg Tablolarına kolayca aktarmasına olanak tanır.
Firehose, müşterilerin veri akışlarını yakalamasına, dönüştürmesine ve analiz için Amazon S3, Amazon Redshift, OpenSearch, Splunk ve Snowflake gibi hedeflere göndermesine olanak tanıyan, tamamen yönetilen, sunucusuz bir akış hizmetidir. Bu işlev sayesinde Firehose, seçilen veri tabanı tablolarından ilk tam veri kopyalama işlemi gerçekleştirir, ardından Apache Iceberg Tablolarındaki ekleme, güncelleme ve silme işlemlerini yansıtmak için sürekli olarak Değişiklik Verisi Yakalama (CDC) güncellemeleri yayınlar. Bu modern çözüm, karmaşık veri hattı kurulumlarını ortadan kaldırırken veri tabanı işlem performansı üzerindeki etkiyi en aza indirir.
Temel özellikler şunlardır: • Kaynak veri tabanı şemalarıyla eşleşen Apache Iceberg Tablolarının otomatik olarak oluşturulması • Kaynak değişikliklerine yanıt olarak otomatik şema gelişimi • Belirli veri tabanlarının, tabloların ve sütunların özenli replikasyonu
Bu önizleme özelliği Çin, AWS GovCloud (ABD) ve Asya Pasifik (Malezya) Bölgeleri hariç tüm AWS bölgelerinde kullanılabilir. Şartlar ve koşullar için AWS Hizmet Koşulları'ndaki Beta Hizmet Katılımı bölümüne bakın.
Başlamak için Amazon Data Firehose belgelerini ve konsolunu ziyaret edin.
Bu özellik hakkında daha fazla bilgi edinmek için bu AWS Blogu gönderisini ziyaret edin.