AWS'de Modern Veri Mimarisi

Data lake'inizi, veri ambarınızı ve amaca özel tasarlanmış veri depolarınızı sorunsuz bir şekilde entegre edin

Modern veri mimarisi - Tüm bunlar nasıl çalışır?

Modern bir veri mimarisi, analizlerde herkese uyan tek bir yaklaşım benimsemenin uzlaşmayla sonuçlandığını gösterir. Bu, yalnızca bir data lake'i bir veri ambarıyla entegre etmekle ilgili değil, daha çok bir data lake'i, bir veri ambarını ve amaca özel tasarlanmış depoları entegre ederek birleşik bir yönetişim ve veriler için kolay taşınabilirlik sağlamakla ilgilidir. Müşteriler, AWS'de modern bir veri mimarisi sayesinde ölçeklenebilir data lake'leri hızla oluşturabilir; amaca özel tasarlanmış veri hizmetlerinden oluşan geniş ve derin bir koleksiyondan yararlanabilir; birleşik bir veri erişimi, güvenlik ve yönetişim aracılığıyla uygunluk sağlayabilir; performanstan ödün vermeden sistemlerini düşük bir maliyetle ölçeklendirebilir; verileri kurumsal sınırlar dahilinde kolayca paylaşabilir ve böylece uygun ölçekte hızlı ve çevik bir şekilde karar alabilirler.

Nasıl çalışır? - Modern Veri Mimarisi

Neden modern bir veri mimarisine ihtiyacınız var?

Veri hacimleri, benzeri görülmemiş bir hızla terabaytlardan petabaytlara ve bazen de eksabaytlara kadar çıkıyor. Şirket içi geleneksel veri analizi yaklaşımları, yeterince iyi ölçeklenmediğinden ve çok pahalı olduğundan bu veri hacimlerini işleyemez. Pek çok şirket, farklı silolardaki tüm verilerini alıyor ve doğrudan bu veriler üzerinde analiz ve ML çalışmaları gerçekleştirmek için onları çoğu kişinin bir data lake olarak adlandırdığı tek bir konumda topluyor. Bu şirketler başka zamanlarda, hem yapılandırılmış hem de yapılandırılmamış verileri analiz etmek ve hızlı öngörüler edinmek için diğer verileri amaca özel tasarlanmış veri depolarında saklıyor. Veriler, çekime sahip olduğundan bu veri hareketi "içten dışa", "dıştan içe", "sınır çevresinde" veya "paylaşımlı" olabilir.

  • İçten dışa

  • İçten dışa veri taşıma

    Müşteriler, verileri bir data lake'te depoluyor ve ardından ek makine öğrenimi veya analiz için bu verilerin bir kısmını amaca özel tasarlanmış bir veri deposuna taşıyor.

    Örnek: Web uygulamalarındaki tıklama akışı verileri, doğrudan bir data lake'te toplanabilir ve bu verilerin bir kısmı, günlük raporlama için bir veri ambarına taşınabilir. Bu kavramı, içten dışa veri taşıma olarak ele alıyoruz.

    İçten dışa veri taşıma
  • Dıştan içe

  • Dıştan içe veri taşıma

    Müşteriler, verileri bir veri ambarı veya veritabanı gibi amaca özel tasarlanmış veri depolarında saklıyor ve bu verileri, üzerinde analiz yapmak için bir data lake'e taşıyor. 

    Örnek: Makine öğrenimini kullanarak daha büyük bir veri kümesinde ürün tavsiyesi algoritmaları çalıştırmak için belirli bir bölgedeki ürünlerin satışına ilişkin sorgu sonuçlarını veri ambarlarından data lake'lerine kopyalarlar.

    Dıştan içe veri taşıma
  • Sınır çevresinde

  • Sınır çevresinde veri taşıma

    Data lake'inizi, veri ambarınızı ve amaca özel tasarlanmış veri depolarınızı sorunsuz bir şekilde entegre edin. 

    Örnek: Ürün kataloglarını incelemeyi ve veritabanlarındaki arama sorgusu yükünü boşaltmayı kolaylaştırmak için veritabanlarında depolanan ürün kataloğu verilerini arama hizmetlerine kopyalayabilirler.

    Dıştan içe veri taşıma
  • Paylaşımlı

  • Paylaşımlı veri taşıma

    Müşteriler, iş kollarıyla uyumlu veri etki alanları oluşturmak için mantıksal veya fiziksel yönetişim sınırları boyunca yönetişim ve veri paylaşımını kolaylaştırmak üzere modern bir veri mimarisi kullanıyor

    Paylaşımlı veri taşıma
  • Veri çekimi

  • Veri çekimi

    Bu data lake'lerdeki ve amaca özel tasarlanmış depolardaki veriler artmaya devam ettikçe, çekimden dolayı tüm bu verileri taşımak daha zor bir hal alır. Analiz gerçekleştirmek ve öngörü elde etmek için verilerin ihtiyaç duyulan yere, doğru denetimlerle kolayca ulaşmasını sağlamak da eşit derecede önemlidir.

    Veri çekimi

Modern veri mimarisi bileşenleri

Kuruluşlar, farklı silolardaki verilerini alıyor ve bu veriler üzerinde analiz ve makine öğrenimi çalışmaları gerçekleştirmek için onları tek bir konumda topluyor. En yüksek değeri elde etmek için, verilerini data lake'ler ve amaca özel tasarlanmış veri depoları arasında kolayca taşımak üzere modern bir veri mimarisinden yararlanmaları gerekiyor. Bu modern mimari yöntemi şunları gerektirir:

Diğer hizmetlere kıyasla, daha fazla müşteri AWS'de modern veri mimarisinden yararlanıyor

  • BMW Group
  • BMW Group
    BMW Group

    BMW Group, inovasyonu hızlandırmak ve veri kullanımını uygun ölçekte demokratikleştirmek için şirket içi data lake'ini Amazon S3 tarafından desteklenen bir data lake'e taşıdı ve şimdi, her gün milyonlarca araçtan terabaytlarca telemetri verisini işliyor ve sorunları müşteriler etkilenmeden çözüyor.

    Örnek olay incelemesini okuyun 
  • Nielsen
  • Nielsen
    Nielsen

    Küresel bir ölçüm ve veri analizi şirketi olan Nielsen, modern bir bulut teknolojisinden yararlanarak her gün alabileceği, işleyebileceği ve müşterilerine raporlayabileceği veri miktarını önemli ölçüde artırdı. Günlük 40.000 hanede ölçüm yaparken, şimdi bu sayı 30 milyonu aştı.

    Örnek olay incelemesini okuyun 
  • Engie
  • Engie

    ENGIE, 160.000 çalışanı ve 70 ülkede faaliyet gösteren 40 iş birimiyle Fransa'nın en büyük kamu hizmetleri şirketlerinden biridir. Ortak Veri Merkezi’nin yaklaşık 100 TB boyutundaki data lake'i; veri bilimi, pazarlama ve operasyonlardaki iş ihtiyaçlarını karşılamak için AWS hizmetlerini kullanıyor.

    Örnek olay incelemesini okuyun 

Çözüm Ortakları

Çözüm ortaklarımızın, kuruluşların AWS'de modern bir veri mimarisi oluşturmasına nasıl yardımcı olduğunu öğrenin.

Cloudera

Cloudera

Cloudera Enterprise'ı AWS üzerinde çalıştırmak, BT ve iş kullanıcılarına modern veri işleme ve analiz için temel oluşturabilecek veri yönetimi platformu sağlamaktadır.

Daha fazla bilgi edinin »

Informatica Cloud

Informatica Cloud

Informatica Cloud, sayısı 100'ü aşan uygulamaya yerel bağlantı sağlayan AWS veri hizmetlerine, optimize entegrasyon sağlamaktadır.

Daha fazla bilgi edinin »

Dataguise

Dataguise

Dataguise, güvenli iş yürütme konusunda liderdir ve nerede depolandığına veya kimin kullanması gerektiğine bakılmaksızın, işletmenin hassas verilerini tespit eden ve koruyan veri merkezli güvenlik çözümleri sunar.

Daha fazla bilgi edinin »

Alluxio Data Orchestration

Alluxio Data Orchestration

Alluxio Data Orchestration, kullanıcıların analiz ve yapay zeka iş yükleri için EMR ve S3 gibi AWS hizmetlerinden daha iyi yararlanmasını sağlar.

Daha fazla bilgi edinin »

Kullanmaya başlama

AWS Data Driven Everything programı

AWS Data-Driven Everything
AWS, AWS Data-Driven EVERYTHING (D2E) programında müşterilerimizle iş birliği içinde çalışarak daha hassas şekilde ve çok daha iddialı bir kapsamda daha hızlı hareket etmenizi ve böylelikle kendi veri çarkınızı hızlı bir biçimde çalıştırmanızı sağlayacaktır.

Daha fazla bilgi edinin »

AWS data lab

AWS Data Lab
AWS Data Lab, veri ve analiz modernizasyonu girişimlerini hızlandıran somut sonuçlar ortaya koymak amacıyla müşteriler ile AWS teknik kaynakları arasında hızlandırılmış ve ortak mühendislik çalışmaları sunar.

Daha fazla bilgi edinin »

AWS analiz ve büyük veri referans mimarisi

AWS analiz ve büyük veri referans mimarisi
AWS'de bulut verileri analizi, veri ambarı ve veri yönetimine yönelik en iyi mimari uygulamaları hakkında daha fazla bilgi edinin.

Daha fazla bilgi edinin »