Veröffentlicht am: Aug 9, 2019
AWS Lake Formation ist ein Service, der es Ihnen ermöglicht, innerhalb weniger Tage einen sicheren Data Lake einzurichten. Ein Data Lake ist ein zentralisiertes, verwaltetes und gesichertes Repository, das alle Ihre Daten speichert, sowohl in ihrer ursprünglichen Form als auch zur Analyse vorbereitet. Ein Data Lake ermöglicht es Ihnen, Datensilos zu zerlegen und verschiedene Arten von Analysen zu kombinieren, um so Einsichten zu gewinnen und bessere Geschäftsentscheidungen treffen zu können.
Allerdings ist die Einrichtung und Verwaltung von Data Lakes heute mit vielen manuellen, komplizierten und zeitaufwändigen Aufgaben verbunden. Diese Arbeit umfasst das Laden von Daten aus verschiedenen Quellen, das Überwachen dieser Datenflüsse, das Einrichten von Partitionen, das Aktivieren von Verschlüsselung und Schlüsselverwaltung, das Definieren von Transformationsjobs und das Überwachen ihres Betriebs, das Reorganisieren von Daten in ein spaltenförmiges Format, das Konfigurieren von Zugriffskontrolleinstellungen mithilfe von Machine Learning zur Identifizierung von approximativen Duplikaten und zum Abgleich von Datensätzen, das Gewährleisten des Zugriffs auf Datensätze und das Überprüfen des Zugriffs im Zeitablauf.
Die Erstellung eines Data Lake mit AWS Lake Formation umfasst lediglich die Angabe, wo sich Ihre Daten befinden und welche Datenzugriffs- und Sicherheitsrichtlinien Sie anwenden möchten. AWS Lake Formation sammelt und katalogisiert dann Daten aus Datenbanken und Objektspeichern, verschiebt die Daten in Ihren neuen Amazon S3 Data Lake, bereinigt und klassifiziert Daten mit Hilfe von Machine Learning-Algorithmen und sichert den Zugriff auf Ihre vertraulichen Daten. Ihre Benutzer können dann auf einen zentralen Datenkatalog zugreifen, der die verfügbaren Datensätze und deren Verwendung beschreibt. Die Benutzer verwenden diese Datensätze dann mit ihrer Auswahl an Analyse- und Machine Learning-Services, wie Amazon EMR für Apache Spark, Amazon Redshift Spectrum und Amazon Athena.
AWS Lake Formation ist in den AWS-Regionen USA Ost (Nord-Virginia), USA Ost (Ohio) und USA West (Oregon), EU (Irland) und Asien-Pazifik (Tokio) verfügbar. Um alle verfügbaren AWS Lake Formation-Regionen anzuzeigen, besuchen Sie die AWS-Region-Seite. Machen Sie erste Schritte mit AWS Lake Formation und rufen Sie die AWS Lake Formation-Konsole auf.