Amazon FSx for Lustre

Schneller und skalierbarer gemeinsamer Speicher für die Verarbeitung Ihrer Datenverarbeitungs-Workloads

Amazon FSx for Lustre ist ein vollständig verwalteter Service, der einen kostengünstigen, hochleistungsfähigen Speicher für Datenverarbeitungs-Workloads bietet. Viele Workloads wie Machine Learning, Hochleistungsdatenverarbeitung (HPC), Video-Rendering sowie Finanzsimulationen, hängen von Datenverarbeitungs-Instances ab, die auf denselben Datensatz über gemeinsamen Hochleistungsspeicher zugreifen.

Mit Unterstützung durch Lustre, dem weltweit beliebtesten Hochleistungsdateisystem, bietet FSx for Lustre Latenzen unterhalb von Millisekunden, einen Datendurchsatz von bis zu mehreren Hundert Gigabyte pro Sekunde sowie Millionen IOPS. Außerdem bietet es mehrere Bereitstellungsoptionen und Speichertypen, um Kosten und Leistung Ihrer Workload-Anforderungen zu optimieren.

Die Dateisysteme unter FSx for Lustre können außerdem mit Amazon S3-Buckets verknüpft werden, sodass Sie bequem und gleichzeitig auf Daten auf einem Hochleistungsdateisystem und der S3-API zugreifen und diese verarbeiten können.

Überblick: Amazon FSx for Lustre

Vorteile

Extrem leistungsstark und hochgradig skalierbar

Amazon FSx for Lustre bietet die Leistung, die Sie benötigen, um eine Vielzahl von Hochleistungs-Workloads zu bewältigen. Das Lustre-Dateisystem ist für die Datenverarbeitung optimiert, mit Latenzen unterhalb von Millisekunden und einem Durchsatz, der auf Hunderte von Gigabyte pro Sekunde skaliert. Mit nur wenigen Mausklicks können Sie auf gemeinsamen Hochleistungsspeicher auf Tausenden von Datenverarbeitungs-Instances zugreifen.

Für die Verwendung von S3-Daten optimiert

Mit Amazon FSx for Lustre gleicht die Verarbeitung Ihrer Cloud-Datensätze in S3 einem Kinderspiel. Wenn Sie sie mit einem S3-Bucket verknüpfen, stellt FSx for Lustre Objekte transparent als Dateien dar, sodass Sie Ihren Workload ausführen können, ohne die Datenübertragung von S3 verwalten zu müssen. Wenn sich die Inhalte Ihres S3-Buckets ändern, aktualisiert FSx for Lustre Ihr Dateisystem automatisch mit den neuesten Daten, die für die Ausführung Ihres Workloads verfügbar sind.

Kostengünstig

Amazon FSx for Lustre bietet diverse Speicheroptionen zur Optimierung von Preis und Leistung. Der Solid-State Drive (SSD)-Speicher ist für latenzsensitive Workloads optimiert. Der Hard Disk Drive (HDD)-Speicher eignet sich ideal für Workloads, bei denen der Datendurchsatz im Vordergrund steht. Sie können außerdem unreplizierte Scratch-Dateisysteme verwenden, um die Kosten für die kurzfristige Verarbeitung von Daten weiter zu reduzieren. 

Ideal geeignet für beliebige Linux-Workloads

Amazon FSx for Lustre ist POSIX-konform. So können Sie Ihre aktuellen Linux-basierten Anwendungen verwenden, ohne Änderungen vornehmen zu müssen. FSx für Lustre bietet eine native Dateisystemoberfläche und funktioniert wie jedes andere Dateisystem in Ihrem Linux-Betriebssystem. Es sieht Read-after-Write-Konsistenz vor und unterstützt die Sperrung von Dateien. Sie können auf Ihre Dateisysteme von Amazon EC2-Instances, Amazon-EKS-Clustern und lokal über AWS Direct Connect oder AWS VPN zugreifen.

Einfach und vollständig verwaltet

Amazon FSx for Lustre macht es einfach, das leistungsstarke Lustre-Dateisystem in der Cloud zu starten und auszuführen. Sie brauchen sich nicht mehr um die Bereitstellung und Wartung der Hardware, die Software-Konfiguration, die Backup-Verwaltung, die Überwachung des Speicherverbrauchs und die komplexe Leistungsabstimmung von Dateisystemen zu kümmern. Mithilfe der AWS-Managementkonsole, der AWS-Befehlszeilenschnittstelle oder eines AWS SDK können Sie in wenigen Minuten ein Amazon FSx for Lustre-Dateisystem erstellen und starten.

Sicher und regelkonform

Amazon FSx for Lustre verschlüsselt Ihre Daten in der Ruhephase und während der Übertragung automatisch. FSx for Lustre ist PCI-DSS-, ISO- und SOC-konform und ist HIPAA-kompatibel. Sie können den Netzwerkzugang über POSIX-Berechtigungen oder die Regeln der Amazon Virtual Private Cloud (VPC) Security Group kontrollieren. Um die Anforderungen an die Datensicherung zu erfüllen, können Sie AWS Backup auch für die zentralisierte Sicherung und das Compliance-Management für Ihre persistenten FSx for Lustre-Dateisysteme verwenden, die nicht mit einem dauerhaften S3-Datenspeicher verbunden sind.

Anwendungsfälle

Machine Learning

Machine-Learning-Workloads nehmen riesige Mengen an Trainingsdaten in Anspruch. Diese Workloads nutzen häufig einen gemeinsamen Datenspeicher, da mehrere da mehrere Recheninstanzen die Trainingsdatensätze gleichzeitig verarbeiten müssen. FSx for Lustre eignet sich ideal für Workloads im Bereich des Machine Learning, da es einen gemeinsamen Dateispeicher mit hohem Durchsatz und konsistenten, niedrigen Latenzzeiten für die Verarbeitung der ML-Trainingsdatensätze gewährleistet. FSx for Lustre ist auch in Amazon SageMaker integriert, so dass Sie Ihre Schulungsjobs beschleunigen können.

High Performance Computing

High Performance Computing (HPC) ermöglicht Wissenschaftlern und Technikern das Lösen komplexer, rechenintensiver Probleme. HPC-Workloads, etwa bei der Erkennung von Öl- oder Gasvorkommen oder in der Genomanalyse, verarbeiten riesige Datenmengen, auf die mehrere Recheninstanzen mit hohem Durchsatz zugreifen müssen. FSx for Lustre ist ideal für HPC- und wissenschaftliche Berechnungen, da es ein Dateisystem bietet, das für die Leistung und die Kosten von Hochleistungs-Workloads optimiert ist, mit Dateisystemzugriff über Tausende von EC2-Instances hinweg. FSx for Lustre lässt sich auch in AWS ParallelCluster und AWS Batch integrieren, was die Verwendung mit Ihren HPC-Workloads erleichtert.

Medienverarbeitung und -transkodierung

Verarbeitungs-Workflows für Mediendaten, etwa Videorendering, visuelle Effekte und Medienproduktion, erfordern Rechen- und Speicherresourcen, um die Erstellung riesiger Datenmengen zu handhaben. FSx for Lustre bietet die hohe Leistung und geringe Latenzzeit, die für die Verarbeitung, Verteilung und Analyse digitaler Mediendateien erforderlich sind.

Autonome Fahrzeuge

Kunden, die autonome Fahrzeugsysteme entwickeln, testen ihre Modelle oft anhand von Simulationen und im Rahmen von Schulungen und nutzen dabei riesige Mengen an Fahrzeugsensor- und Kameradaten zur Gewährleistung der Fahrzeugsicherheit. FSx for Lustre ermöglicht Ihnen den gleichzeitigen Zugriff auf diese Daten von Tausenden von Knoten mit hoher Leistung, wodurch Sie Simulationen im Maßstab leichter ausführen und die Modellentwicklung beschleunigen können.

Big-Data- und Finanzanalysen

Anwendungsfälle für Big-Data-Analysen, wie z. B. SAS Grid-Workloads und Finanzanalyse, erzeugen riesige Datenmengen, die Hochleistungsspeicher benötigen, um datenintensive Anwendungen zu betreiben. Die Verarbeitung des ständig wachsenden Datenvolumens kann kostspielig und kompliziert sein. Amazon FSx for Lustre kann große Datenmengen in großem Maßstab verarbeiten und ist leistungs- und kostenoptimiert, sodass die Zeit bis zu Ermittlung und Wertschöpfung für Ihr Unternehmen verkürzt wird.

Electronic Design Automation

Electronic Design Automation (EDA) ist ein HPC-Anwendungsfall, bei dem die Leistung und Ausfälle während der Designphase der Siliziumchipherstellung simuliert werden. FSx for Lustre gibt Ihnen die Leistung und Flexibilität, mit der Sie Innovationen schneller voranzutreiben, neue Produkte entwickeln und verifizieren und Ihr System nach Bedarf skalieren können.

Product-Page_Standard-Icons_01_Product-Features_SqInk
Mehr zu den Merkmalen von Amazon FSx für Lustre

Erfahren Sie mehr über die Hauptmerkmale von Amazon FSx für Lustre.

Weitere Informationen 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
Registrieren Sie sich und erhalten Sie ein kostenloses Konto

Sie erhalten sofort Zugriff auf das kostenlose AWS-Kontingent. 

Registrieren 
Product-Page_Standard-Icons_03_Start-Building_SqInk
Beginnen Sie mit der Entwicklung in der Konsole

Beginnen Sie die Erstellung mit Amazon FSx für Lustre in der AWS-Konsole.

Anmeldung