Publié le: Feb 6, 2019
Amazon FSx for Lustre, un système de fichier haute performance pour le machine learning, de calcul haute performance, d'analyse et de charges de travail de traitement des autres données facilite le traitement des données résidant dans Amazon S3 grâce à de nouvelles options d'écriture vers S3 et une vitesse de transfert des données 2 fois plus rapide entre FSx for Lustre et S3.
Les charges de travail de traitement des données nécessitent généralement des données à présenter par une interface de système de fichier POSIX rapide et évolutive et ont généralement des ensembles de données conservées sur Amazon S3. Avec FSx for Lustre, vous pouvez lancer rapidement et facilement un système de fichiers performant et évolutif relié à vos données Amazon S3, accéder de manière transparente aux objets S3 comme des fichiers, réécrire les résultats dans S3, puis arrêter le système de fichiers.
Auparavant, lorsque vous souhaitiez réécrire vos résultats dans S3 à partir d'un système de fichier FSx for Lustre, vos fichiers nouveaux ou modifiés étaient écrits en tant que nouveaux objets dans un emplacement prédéfini de votre compartiment S3. Désormais, vous avez la possibilité d'écraser les objets originaux de votre compartiment Amazon S3 ou écrire les fichiers nouveaux ou modifiés vers un préfixe que vous avez précisé. Ces options permettent davantage de flexibilité pour incorporer FSx for Lustre dans vos flux de travail de traitement des données.
De plus, Amazon FSx for Lustre transfère désormais vos données deux fois plus rapidement entre votre compartiment Amazon S3 et votre système de fichier FSx for Lustre, vous permettant ainsi de compléter vos charges de travail de traitement encore plus vite.
Ces améliorations sont disponibles pour tous les nouveaux systèmes de fichiers dans toutes les régions dans lesquelles FSx for Lustre est disponible. En savoir plus sur les nouvelles options d'écriture des résultats dans S3 et en savoir plus sur les performances de FSx for Lustre.