Amazon Redshift ile Amazon Aurora sıfır ETL entegrasyonu

Petabaytlık işlem verisinde neredeyse gerçek zamanlı analitiği etkinleştirin
Sıfır ETL entegrasyonlarını kullanmaya başlayın
Desteğe Ulaşın

Neden Amazon Redshift ile Aurora sıfır ETL entegrasyonu?

Amazon Redshift ile Amazon Aurora sıfır ETL entegrasyonu, petabaytlarca işlem verisinde Amazon Redshift kullanarak neredeyse gerçek zamanlı analiz ve makine öğrenimi (ML) sağlar. İşlem verilerinin Amazon Aurora'ya yazılmasından birkaç saniye sonra sıfır ETL, verileri Amazon Redshift'te sorunsuz bir şekilde kullanılabilir hale getirir ve ayıklama, dönüştürme ve yükleme (ETL) işlemlerini gerçekleştiren karmaşık veri işlem hatları oluşturma ve bunları yönetme ihtiyacını ortadan kaldırır.

Avantajlar

Amazon Redshift'te sadece birkaç saniye içinde Aurora'dan işlem verilerine erişerek petabaytlarca veri üzerinde gerçek zamanlı analiz ve ML çalıştırın.

İşlem verilerini analiz sistemlerine taşımak için ETL işlem hatlarını oluşturmak ve yönetmek zorunda kalmadan neredeyse gerçek zamanlı olarak hızlı bir şekilde analiz edin.

Çeşitli Aurora veritabanı kümelerinden gelen birden fazla tabloyu birleştirin ve birden fazla uygulama ve veri kaynağı genelinde birleşik analiz çalıştırmak için verilerinizi bir Amazon Redshift veri ambarında olacak şekilde çoğaltın.

Hem Amazon Aurora Sunucusuz v2 hem de Amazon Redshift Sunucusuz'u kullanırken, herhangi bir altyapı yönetmek zorunda kalmadan işlemsel veriler üzerinde neredeyse gerçek zamanlı analizler çalıştırın.

Kullanım örnekleri

Kritik ve zaman hassasiyetli olaylara etkili bir şekilde yanıt vermek üzere işlem verileri ve diğer verilerden neredeyse gerçek zamanlı öngörüler elde etmek için Amazon Redshift analiz ve ML imkanlarını kullanın. Gerçek zamanlı analizler, içerik hedefleme, optimize edilmiş oyun deneyimi, veri kalitesi izleme, dolandırıcılık tespiti ve müşteri davranış analizi gibi kullanım örnekleri için daha doğru ve zamanında öngörüler elde etmenize yardımcı olabilir.

Amazon Redshift ile Aurora sıfır ETL entegrasyonu sayesinde, Amazon Redshift imkanlarını kullanarak birden çok Aurora veri tabanı kümesinden birleştirilmiş petabaytlarca işlem verisini analiz edebilirsiniz. Amazon Redshift'in yerleşik ML, gerçekleştirilmiş görünümler, veri paylaşımı ile birden çok veri deposuna ve veri gölüne federe erişim gibi kapsamlı analiz imkanlarından yararlanabilirsiniz. Amazon Redshift ML sayesinde Amazon SageMaker'a yerel entegrasyonla basit SQL komutlarını kullanarak milyarlarca tahmin çalıştırabilirsiniz.

Verileri işlem veritabanından merkezi bir veri ambarına taşımak genellikle karmaşık bir veri işlem hattı ETL çözümü oluşturmayı, yönetmeyi ve çalıştırmayı gerektirir. Sıfır ETL entegrasyonu ile şemayı, mevcut verileri ve veri değişikliklerini Aurora veritabanınızdan yeni veya mevcut bir Amazon Redshift kümesinde olacak şekilde sorunsuz bir şekilde çoğaltabilirsiniz. Sıfır ETL entegrasyonu, karmaşık veri işlem hattı yönetimi ihtiyacını ortadan kaldırır.

Kullanmaya başlama

Aurora ile Amazon Redshift arasında sıfır ETL entegrasyonunuzu oluşturmak için veri kaynağı olarak bir Aurora DB kümesi ve hedef olarak bir Amazon Redshift veri ambarı belirtilir. Entegrasyon, kaynak veri tabanındaki verileri çoğaltarak hedef veri ambarına yerleştirir. Veriler saniyeler içinde Amazon Redshift'te kullanılabilir hale gelir ve veri analistlerinin veriler üzerinde Amazon Redshift analizi ve ML işlevini kullanmaya başlamasına olanak tanır. Daha fazla bilgi edinmek için lütfen Aurora ve Amazon Redshift ile ilgili kullanmaya başlama kılavuzlarını ziyaret edin.

Kaynaklar

Fiyatlandırma

AWS, Amazon Redshift ile Aurora sıfır ETL entegrasyonu için ek ücret talep etmiyor. Sıfır ETL entegrasyonunun parçası olarak değişiklik verileri oluşturmak ve işlemek amacıyla kullanılan mevcut Aurora ve Amazon Redshift kaynakları için ödeme yaparsınız. Bu kaynaklar şunları içerebilir:

  • Değişiklik verilerini yakalamayı etkinleştirerek kullanılan ek G/Ç ve depolama
  • Amazon Redshift veri tabanlarınızın başlatılması için ilk veri aktarımının anlık yedek dışa aktarma maliyetleri
  • Çoğaltılmış verileri depolamak için ek Amazon Redshift depolama alanı
  • Veri çoğaltmayı işlemek için ek Amazon Redshift işlemi
  • Verileri kaynaktan hedefe taşımak için AZ arası veri aktarım maliyetleri.

Sıfır ETL entegrasyonu ile veri değişikliklerinin sürekli işlenmesi hiçbir ek ücret alınmadan sunulur. Daha fazla bilgi için lütfen Aurora fiyatlandırma sayfasını ziyaret edin. 

Müşteriler

  • Infosys

     

    Taşıma doğrulaması; Infosys üretim, perakende ve lojistik müşterileri için tedarik zinciri bütünlüğünü korumada çok önemlidir. Bunun için de gönderileri izlemek ve taşıma analizinde taşıma izleme verilerinin gerçek zamanlı olarak alınması gereklidir.

    Infosys, verileri gerçek zamanlı olarak almak için sıfır ETL'nin yeteneklerinden yararlanarak yük sevkiyatı takibini mümkün kılmanın yanı sıra konum, durum ve tahmini varış zamanı hakkında görünürlük sağladı. Bu da taşıma operasyonlarının optimizasyonuna ve önemli maliyet düşüşüne olanak tanır. Infosys Cobalt ve Topaz endüstri ayrıntılı planlarıyla birlikte sıfır ETL kapsamlı raporlama ve analizi sayesinde veri odaklı karar verme artık mümkün.

    Sunil Senan, Veri, Analiz ve Yapay Zeka SVP ve Genel Müdürü - Infosys

  • Intuit

    Intuit; TurboTax, Credit Karma, QuickBooks ve Mailchimp ile 100 milyon tüketici ve küçük işletme müşterisi için refahı sağlayan küresel finansal teknoloji platformudur. Yaklaşan bir geçişin karmaşıklığında Intuit, günde 10 milyondan fazla profil geçişinin şaşırtıcı bir hızını düşünüyordu. Intuit, veri alımı sürecini kolaylaştırmak ve karmaşık mühendislik çalışmalarına olan ihtiyacı ortadan kaldırmak için Amazon Redshift ile Amazon Aurora MySQL sıfır ETL entegrasyonuna başvurdu.

    Büyük veri hacmi ve sorunsuz geçiş ihtiyacı bizim için önemli bir zorluktu. Ayrıca, geçiş sürecini hızlı bir şekilde analiz etmemizi ve hızlı, veri odaklı kararlar almamızı sağlayacak bir çözüme ihtiyacımız vardı. Bu zorlukların üstesinden gelmek için Amazon Redshift ile Amazon Aurora sıfır ETL entegrasyonuna başvurarak veri alma sürecimizi kolaylaştırdık ve karmaşık mühendislik çalışmalarına duyulan ihtiyacı ortadan kaldırdık. Sıfır ETL ile, veri yakalama veya ayrı alım işlerine gerek kalmadan Amazon Redshift'e büyük miktarda veri gönderebildik. Bu ayrıca kritik teknik ve iş kararlarını yönlendirmek için hızlı öngörüler sağladı ve normalde gerekli olabilecek aylarca sürecek çalışma süresinden tasarruf sağladı. Amazon Redshift ile Aurora sıfır ETL entegrasyonunu kullanmak, büyük ölçekli veri taşımalar ve neredeyse gerçek zamanlı analiz için Intuit'teki yeni modelleri keşfetmemizi sağladı.

    Aruna Ghiware, Ürün Geliştirme Müdürü - Intuit

  • KINTO Technologies Corporation

    KINTO Technologies Corporation, mobilite platformu endüstrisinin lider bir oyuncusudur ve Toyota'nın finansal hizmetler şirketi olarak KINTO hizmetinin geliştirilmesinden sorumlu teknoloji şirketidir. Amazon Redshift ile Amazon Aurora MySQL sıfır ETL entegrasyonundan yararlanan KINTO Technologies, daha esnek bir veri hattı elde etmeyi başardı ve artık Amazon Redshift'in gelişmiş analiz özelliklerini operasyon verilerine neredeyse gerçek zamanlı olarak uygulayabiliyor.

    Sıfır ETL entegrasyonu kullanıma sunulmadan önce değişiklikleri çekirdek veri tabanlarımızdan aşağı akış uygulamalarına sürekli olarak aktaran özel olarak oluşturulmuş bir çözüm kullanıyorduk ancak üretim iş yükümüz üzerinde uzun süreli performans zorlukları ve etkilerle karşı karşıya kalıyorduk. Üretim iş yükü üzerindeki performans etkisinin üstesinden gelmek için, güncellemeleri daha az sıklıkta göndermek için işlem hatlarını manuel olarak ayarlamamız ve Amazon Redshift'teki eski verilerle yetinmemiz gerekiyordu. Amazon Redshift ile Aurora MySQL sıfır ETL entegrasyonunu kullanarak Amazon Redshift'te her zaman neredeyse gerçek zamanlı verilere sahip olabiliyoruz. Bu sayede, ETL işlemlerinde veri işlem hatlarını manuel olarak yönetmek veya iş yüklerimiz üzerindeki performans etkileriyle uğraşmak için geliştiricinin harcadığı zamandan tasarruf ediyor ve operasyonel yükümüzü azaltıyoruz.

    Hitoshi Kageyama, İcra Başkan Yardımcısı - KINTO Technologies Corporation

  • Money Forward i

    Money Forward i, sezgisel SaaS Yönetim Platformu Admina aracılığıyla tekrarlayan görevleri düzene sokarak, maliyetleri düşürerek ve güvenliği güçlendirerek kuruluşlardaki BT ekiplerinin üretkenliğini ve yaratıcı potansiyelini artırmaya çalışır.

    Amazon Redshift ile Amazon Aurora sıfır ETL entegrasyonu kullanıma sunulmadan önce Amazon Redshift'te Amazon Aurora MySQL'den gelen ürün verilerini analiz etmeye yönelik ETL operasyonlarımızı uygulama ve sürdürme yükü zorlayıcıydı. Amazon Redshift ile Aurora MySQL sıfır ETL entegrasyonu, Aurora MySQL veri tabanlarımız ile Amazon Redshift arasında neredeyse gerçek zamanlı veri senkronizasyonu sağlar ve analiz ortamı oluşturma süresini bir aydan sadece üç saate düşürür. Sıfır ETL entegrasyonu sayesinde geliştirme esnasındaki ilk yükün azalmasının yanında üretim ortamları üzerinde daha az etki yaratılıyor ve analiz ortamının en az maliyetle ve en fazla hızla oluşturulması mümkün oluyor.

    Katsutoshi Murakami, Money Forward Inc. CPO ve Direktörü

  • Woolworths

    Woolworths| yenilik, değer ve sürdürülebilirliğe odaklanan çok çeşitli kalitede giyim, genel ürünler ve gıda ürünleri sunan önde gelen bir Sahra altı Afrika perakendecisidir.

    Verilerimizden zamanında öngörü elde etmek çok önemli çünkü bu sayede işletmemiz genelinde veri odaklı kararları hızlıca teşvik edebilir ve kritik, zamana duyarlı olaylara etkili şekilde yanıt verebiliriz. Değişim verilerini yakalamayı kullanmak ve kayıtların koagülasyonu zaman alıcıydı ve verilerin işlenmesi beklenenden daha maliyetliydi. Amazon Aurora MySQL sıfır ETL entegrasyonunu Amazon Redshift ile kullanarak, ETL işlemleri için gereken mühendislik çabası nedeniyle geliştirilmesi 2 ay alacak olan sonuçları bir gün içinde üretebiliriz. Veri gecikmesi, entegrasyon kullanılarak önemli ölçüde azaltıldı çünkü veriler sorgulamaya hazır durumdaydı. Bu da olaylar meydana geldikçe daha hızlı karar vermemizi sağladı. Amazon Redshift ile Aurora sıfır ETL entegrasyonunu kullanarak mühendislik faaliyetlerimizi azalttık, işlem hattı yönetimindeki hata noktalarının indirgenmesini sağladık ve maliyetlerden tasarruf ettik.

    Raamy Schroeder, İş Zekası Lideri - Woolworths