Amazon Kinesis Veri Akışları, Amazon S3 Tabloları'ndaki Apache Iceberg tablolarına veri ileten akış tabloları duyurdu
Amazon Kinesis Veri Akışları, Kinesis akışlarından Amazon S3 Tabloları'na Apache Iceberg formatında sürekli olarak veri ileten, tamamen sunucusuz yeni akış tabloları özelliğini sunar. Akış tabloları, kendi kendini yöneten Iceberg dağıtım işlem hatları oluşturma ve çalıştırma ihtiyacını ortadan kaldırarak veri dağıtım maliyetlerini %50'ye kadar azaltır. Akıllı satır içi sıkıştırma, küçük dosya sorununu ortadan kaldırır ve sorgu performansını öngörülebilir tutarak aşağı akış sorgu maliyetlerini %30'a kadar azaltır.
Amazon Kinesis Data Streams, veri akışlarını her ölçekte yakalamayı, işlemeyi ve depolamayı kolaylaştıran sunucusuz bir akış verisi hizmetidir. Müşteriler gittikçe daha fazla en yeni verileri kullanarak neredeyse gerçek zamanlı analizleri ve yapay zeka/makine öğrenimi iş hatlarını güçlendirmek için Apache Iceberg tablolarına akış verileri göndermek istiyor. Bunu bugün yapmak için müşterilerin özel işlem hatları oluşturup ve yönetmesi, format dönüşümlerini yönetmesi ve bilgi işlem altyapısını yönetmesi gerekiyor ve bu onların maliyetlerini artırıyor. Yüksek hacimli akış alımı, aşağı yönlü sorgu performansını düşüren ve depolama maliyetlerini artıran birçok küçük Parquet dosyası da oluşturur. Akış tabloları sayesinde müşteriler, sadece bir Kinesis akışından Amazon S3 Tabloları'na sürekli olarak veri ileten ve tamamen sunucusuz bir özellik olan bir akış tablosu oluşturmaları yeterlidir. Akıllı satır içi sıkıştırma, küçük dosyaların performansa olan etkisini ortadan kaldırır ve veri tazeliğinden ödün vermeden sorgu performansını öngörülebilir tutar. Kinesis Veri Akışları, herhangi bir özel uygulama veya kendi kendini yöneten bilgi işlem ve operasyonel gider olmadan ölçeklendirme, yeniden deneme, sıkıştırma ve teslimat güvenilirliğini otomatik olarak yönetir ve dakikalar içinde teslim eder. Müşteriler, akış tablolarını konsoldan birkaç tıklamayla entegre bir deneyim olarak veya API'ler aracılığıyla yapılandırır.
Akış tabloları, kurulum ücreti veya minimum taahhüt içermeyen kullanım bazlı fiyatlandırma ile İsteğe Bağlı Avantaj (ODA) ve İsteğe Bağlı Standart (ODS) kapasite modlarını destekler. Yalnızca başarıyla teslim edilen veriler için ücretlendirilirsiniz. Akış tabloları, AWS GovCloud (ABD) ve Çin bölgeleri de dahil olmak üzere Amazon Kinesis Veri Akışları'nın kullanılabildiği tüm AWS bölgelerinde kullanılabilir. Başlamak için Amazon Kinesis Veri Akışları Kullanıcı Kılavuzu'na ve fiyatlandırma sayfasına bakın.