Veröffentlicht am: Feb 6, 2019
Amazon FSx for Lustre, ein Hochleistungsdateisystem für Machine Learning, High Performance Computing, Analyse und andere Datenverarbeitungs-Workloads, macht die Verarbeitung von Daten auf Amazon S3 durch die neuen Optionen zum Zurückschreiben der Ergebnisse nach S3 und der bis um das zweifache höheren Datenübertragungsgeschwindigkeiten zwischen FSx for Lustre und S3 noch einfacher.
Für Datenverarbeitungs-Workloads müssen in der Regel Daten über eine schnelle und skalierbare POSIX-Dateisystem-Schnittstelle bereitgestellt werden, und typischerweise werden Eingabedatensätze benötigt, die auf Amazon S3 gespeichert sind. Mit FSx for Lustre können Sie schnell und einfach ein mit Ihren Amazon S3-Daten verknüpftes leistungsfähiges und skalierbares Dateisystem zusammenstellen, transparent auf S3-Objekte als Dateien zugreifen, die Ergebnisse nach S3 zurückschreiben und das Dateisystem anschließend wieder herunterfahren.
In der Vergangenheit wurden beim Zurückschreiben von Ergebnissen von einem FSx for Lustre-Dateisystem auf S3 Ihre geänderten oder neuen Dateien als neue Objekte auf einen vordefinierten Speicherort in Ihrem S3-Bucket geschrieben. Nun können Sie die ursprünglichen Objekte in Ihrem Amazon S3-Bucket überschreiben oder die neuen oder geänderten Dateien um ein festgelegtes Präfix erweitern. Mit diesen Optionen erhalten Sie zusätzliche Flexibilität bei der Einbindung von FSx for Lustre in Ihre Datenverarbeitungs-Workflows.
Außerdem bietet Amazon FSx for Lustre nun um das zweifache höhere Datenübertragungsgeschwindigkeiten zwischen Ihrem Amazon S3-Bucket und Ihrem FSx for Lustre-Dateisystem und ermöglicht damit, dass Sie Ihre Verarbeitungs-Workloads noch schneller abschließen können.
Diese Verbesserungen sind auf allen neuen Dateisystemen in allen Regionen verfügbar, in denen FSx for Lustre angeboten wird. Erfahren Sie mehr über die neuen Optionen zum Schreiben von Ergebnissen nach S3 und über die Leistungsfähigkeit von FSx for Lustre.