Amazon FSx for Lustre

Système de fichiers haute performance pour le traitement des données Amazon S3 ou sur site

Amazon FSx for Lustre fournit un système de fichiers haute performance optimisé pour le traitement rapide de workloads tels que le machine learning, le calcul haute performance, le traitement vidéo, la modélisation financière et l'automatisation de la conception de composants électroniques. En général, ces workloads nécessitent de présenter les données via une interface de système de fichiers rapide et évolutive, et disposent d'ensembles de données d'entrée conservés sur des stockages de données durables comme Amazon S3.

L'utilisation de systèmes de fichiers haute performance nécessite généralement une expertise spécialisée et des frais administratifs, ce qui nécessite de fournir des serveurs de stockage et de définir des paramètres de performance complexes. Avec Amazon FSx, vous pouvez lancer et exécuter un système de fichiers offrant un accès inférieur à une milliseconde à vos données et vous permettant de lire et d'écrire des données à un débit pouvant atteindre des centaines de gigaoctets par seconde et des millions d'IOPS.

Amazon FSx for Lustre fonctionne de manière native avec Amazon S3, ce qui facilite le traitement des ensembles de données dans le cloud avec des systèmes de fichiers haute performance. Lorsqu'il est lié à un compartiment S3, un système de fichiers FSx for Lustre présente de manière transparente les objets S3 en tant que fichiers et vous permet de réécrire les résultats sur S3. Vous pouvez également utiliser FSx for Lustre en tant que système de fichiers autonome haute performance pour transférer vos workloads sur site vers le cloud. En copiant les données sur site sur un système de fichiers FSx for Lustre, vous pouvez rendre ces données disponibles afin qu'elles soient rapidement traitées par des instances de calcul exécutées sur AWS. Avec Amazon FSx, vous ne payez que les ressources que vous utilisez. Il n'y a aucun engagement minimum, aucun coût matériel ou logiciel initial, ni frais supplémentaires.

Aperçu : Amazon FSx for Lustre

Avantages

Hautes performances et évolutivité

Amazon FSx for Lustre fournit les performances nécessaires pour satisfaire une grande variété de workloads haute performance. FSx for Lustre repose sur Lustre, un système de fichiers populaire haute performance qui est optimisé pour le traitement des données, avec des latences inférieures à une milliseconde et un débit pouvant atteindre des centaines de gigaoctets par seconde.

Accès transparent aux données S3 ou sur site

Amazon FSx fonctionne de manière native avec Amazon S3, ce qui facilite le traitement de vos données S3 avec une interface POSIX haute performance. Lorsqu'il est lié à un compartiment S3, FSx for Lustre présente les objets S3 de manière transparente en tant que fichiers. FSx for Lustre vous permet d’écrire à tout moment dans votre compartiment S3 des données nouvelles ou modifiées sur le système de fichiers. FSx for Lustre vous permet également de transférer vos charges de travail sur site vers le cloud à l'aide d'Amazon Direct Connect ou d'un VPN. 

Entièrement géré

Amazon FSx est entièrement géré, ce qui facilite le lancement et l'exécution de systèmes de fichiers haute performance dans le cloud. Vous n'avez plus besoin de vous inquiéter pour la mise en service et la maintenance du matériel, la configuration logicielle et le réglage complexe des performances des systèmes de fichiers. En seulement quelques minutes, vous pouvez facilement créer et lancer un système de fichiers Amazon FSx à l'aide de l'AWS Management Console, de l'interface de ligne de commande AWS ou d'un kit SDK AWS.

Rentabilité

Amazon FSx for Lustre vous aide à optimiser les coûts de stockage de vos workloads qui nécessitent une importante capacité de calcul : il fournit un stockage économique et performant pour traiter les données, stockant ainsi vos données à long terme durablement sur Amazon S3 ou d'autres magasins de données à faible coût. La haute performance de FSx for Lustre vous permet d'exécuter plus rapidement des workloads de traitement de données, ce qui minimise le temps et l'argent consacrés aux ressources de calcul. Avec FSx for Lustre, vous ne payez que les ressources que vous utilisez. Il n'y a pas de frais initial ou d'engagement minimal requis.

Interface de système de fichier native

Amazon FSx for Lustre est compatible POSIX. Vous pouvez donc utiliser vos applications Linux actuelles sans devoir leur apporter de modifications. FSx for Lustre fournit une interface de système de fichiers native et fonctionne comme n'importe quel système de fichiers avec votre système d'exploitation Linux. Il assure également la cohérence lecture après écriture et prend en charge le verrouillage de fichier. Vous pouvez contrôler l'accès à vos systèmes de fichiers FSx for Lustre avec des autorisations POSIX et des autorisations Amazon Virtual Private Cloud (VPC).

Sécurité et conformité

Amazon FSx chiffre automatiquement vos données au repos. Si vous êtes soumis à une conformité réglementaire, FSx for Lustre est conforme aux normes PCI-DSS, ISO et SOC et est éligible à la norme HIPAA. Amazon FSx prend en charge Amazon Virtual Private Cloud (VPC) pour que vous puissiez lancer les ressources de votre système de fichiers FSx for Lustre sur votre réseau virtuel.

Principe de fonctionnement

FSx_Lustre_diagram

Cas d'utilisation

Machine learning

Les charges de travail de machine learning utilisent des quantités énormes de données de formation. Ces workloads utilisent souvent un stockage de fichiers partagé, car plusieurs instances de calcul doivent traiter les ensembles de données d'apprentissage simultanément. Amazon FSx est optimal pour les workloads de machine learning, car il fournit un stockage de fichiers partagé avec un débit élevé et des latences faibles et cohérentes pour traiter les ensembles de données d'apprentissage ML.

Calcul Haute Performance (HPC)

Le calcul haute performance (HPC) permet aux scientifiques et aux ingénieurs de résoudre des problèmes informatiques complexes nécessitant une importante capacité de calcul. Les workloads HPC, telles que la découverte de pétrole et de gaz et la génomique, traitent d'énormes quantités de données auxquelles plusieurs instances de calcul doivent accéder pour atteindre des débits élevés. Amazon FSx est idéal pour les workloads HPC, car il fournit un système de fichiers optimisé pour les performances et les coûts des workloads de courte durée et à forte intensité de calcul, avec un accès au système de fichiers à travers des milliers d'instances EC2.

Traitement et transcodage multimédias

Les flux de travail de traitement de données multimédia, tels que le rendu vidéo, les effets visuels et la production multimédia, ont besoin des ressources de calcul et de stockage nécessaires pour traiter les énormes quantités de données en cours de création. Amazon FSx fournit les hautes performances et les faibles latences nécessaires au traitement, à la distribution et à l'analyse de fichiers multimédias numériques.

Véhicules autonomes

Les clients développant des systèmes de véhicules autonomes testent souvent des modèles en effectuant des simulations et formations sur d'importantes quantités de données de capteurs et de caméras de véhicules pour garantir la sécurité des ces derniers. Amazon FSx for Lustre vous permet d'accéder à ces données simultanément à partir de centaines de nœuds via un système de fichiers standard avec une latence inférieure à une milliseconde, un débit de plusieurs centaines de gigaoctets par seconde et des milliers d'IOPS. FSx for Lustre vous permet d'effectuer des simulations à l'échelle, de réaliser des milliers d'essais simulés par semaine et d'accélérer le développement de modèle.

Analyse big data

Les cas d'utilisation de l'analyse big data, y compris la détection de fraude et l'analyse financière, produisent des volumes de données énormes qui nécessitent un stockage haute performance pour alimenter des applications utilisant beaucoup de données. La gestion du volume croissant de données peut être coûteuse et complexe. Amazon FSx for Lustre est optimisé en termes de performances et de coûts, ce qui accélère le délai de découverte et confère une valeur ajoutée à votre organisation.

Automatisation de la conception de composants électroniques (EDA)

EDA est une application haute performance courante utilisée pour simuler les performances et les défaillances lors de la phase de conception de la production de puces de silicium. FSx for Lustre offre les performances et la flexibilité qui vous permettent d'innover plus rapidement, de concevoir et de vérifier de nouveaux produits et de les adapter à la demande.

Product-Page_Standard-Icons_01_Product-Features_SqInk
Consultez les fonctionnalités Amazon FSx for Lustre

Découvrez-en davantage sur les fonctionnalités clés d'Amazon FSx for Lustre.

En savoir plus 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
Créer gratuitement un compte

Obtenez un accès instantané à l'offre gratuite d'AWS. 

S'inscrire 
Product-Page_Standard-Icons_03_Start-Building_SqInk
Commencez à créer sur la console

Commencez à créer sur la console AWS avec Amazon FSx for Lustre.

Se connecter