Amazon FSx for Lustre

Com o Amazon FSx for Lustre, fica fácil e econômico iniciar e executar o sistema de arquivos de alta performance mais popular do mundo. Use-o para cargas de trabalho em que a velocidade é importante, como machine learning, high performance computing, HPC (computação de alta performance), processamento de vídeo e modelagem financeira.

O sistema de arquivos de código aberto do Lustre foi projetado para aplicativos que exigem armazenamento rápido, em que você quer que seu armazenamento acompanhe sua computação. O Lustre foi criado para processar, de maneira rápida e econômica, os conjuntos de dados de rápido crescimento no mundo. Além disso, é o sistema de arquivos mais usado para os 500 computadores mais rápidos do mundo. Ele oferece latências abaixo de um milissegundo, até centenas de gigabytes por segundo de throughput e milhões de IOPS.

Agora, como um serviço totalmente gerenciado, o Amazon FSx permite que você use os sistemas de arquivos Lustre para qualquer carga de trabalho em que a velocidade é importante. Ele elimina a tradicional complexidade de configurar e gerenciar de sistemas de arquivos Lustre, permitindo que você ative um sistema de arquivos de alta performance em minutos. Ele também fornece várias opções de implantação para otimizar o custo.

O FSx for Lustre se integra ao Amazon S3, facilitando o processamento de conjuntos de dados com o sistema de arquivos Lustre. Quando vinculado a um bucket do S3, um sistema de arquivos FSx for Lustre apresenta de maneira transparente os objetos do S3 como arquivos e permite que você grave os dados alterados no S3.

Visão geral: Amazon FSx for Lustre

Benefícios

Alta performance e escalabilidade

O Amazon FSx for Lustre oferece a performance para satisfazer uma ampla variedade de cargas de trabalho de alta performance. O sistema de arquivos Lustre é otimizado para processamento de dados, com latências abaixo de um milissegundo e throughput que pode ser escalado para centenas de gigabytes por segundo.

Acesso totalmente integrado a dados do S3

O Amazon FSx for Lustre se integra de modo nativo ao Amazon S3, facilitando o processamento de conjuntos de dados no S3 com uma interface POSIX de alta performance. Quando vinculado a um bucket do S3, o FSx for Lustre apresenta de maneira transparente os objetos do S3 como arquivos. O FSx for Lustre rastreia alterações e permite gravar dados novos e alterados no sistema de arquivos no seu bucket do S3 a qualquer momento.

Simplicidade e gerenciamento total

O Amazon FSx for Lustre facilita a inicialização e a execução do sistema de arquivos Lustre de alta performance na nuvem. Você não precisa mais se preocupar com provisionamento e manutenção de hardware, configuração de software e ajuste complexo da performance do sistema de arquivos. Em questão de minutos, você pode criar e lançar um sistema de arquivos do Amazon FSx for Lustre usando o Console de Gerenciamento da AWS, a CLI da AWS ou um SDK da AWS.

Acesso de aplicativos Linux em execução em qualquer lugar

O Amazon FSx for Lustre é compatível com POSIX, portanto, você pode usar os aplicativos atuais baseados em Linux sem precisar fazer alterações. O FSx for Lustre fornece uma interface com sistema de arquivos nativos e funciona como qualquer sistema de arquivos com o sistema operacional Linux. Ele fornece também consistência de leitura pós gravação, além de suporte para bloqueio de arquivos. Você pode controlar o acesso aos seus sistemas de arquivos FSx for Lustre com permissões POSIX e regras da Amazon Virtual Private Cloud (VPC). Você pode acessar seus sistemas de arquivos de instâncias do Amazon EC2 e de computadores no local usando o AWS Direct Connector ou o AWS VPN.

Várias opções de implantação

O Amazon FSx for Lustre oferece uma opção entre sistemas de arquivos temporários e persistentes para processamento de dados de curto e longo prazos. Os sistemas de arquivos são ideais para armazenamento temporário e processamento de dados com prazo mais curto. Os dados não são replicados e não persistem se um servidor de arquivos falhar. Os sistemas de arquivos persistentes são ideais para armazenamento e cargas de trabalho de prazo mais longo. Em sistemas de arquivos persistentes, os dados são replicados e os servidores de arquivos serão substituídos se falharem.

Segurança e conformidade

O Amazon FSx for Lustre criptografa automaticamente dados ociosos e em trânsito. Se você estiver sujeito à conformidade normativa, o FSx for Lustre está em conformidade com PCI-DSS, ISO e SOC, além de ser qualificado pela HIPAA. Também é possível controlar o acesso à rede por meio de regras de grupos de segurança do Amazon Virtual Private Cloud (VPC).

Casos de uso

Machine Learning

As cargas de trabalho de Machine Learning usam grandes quantidades de dados de treinamento. Essas cargas de trabalho geralmente usam um armazenamento de arquivos compartilhado porque várias instâncias de computação precisam processar os conjuntos de dados de treinamento simultaneamente. O FSx for Lustre é ideal para cargas de trabalho de machine learning, porque oferece uma grande capacidade de armazenamento de arquivos compartilhados com alto throughput e baixas latências consistentes para processar os conjuntos de dados de treinamento de machine learning. O FSx for Lustre também é integrado ao Amazon SageMaker, permitindo que você acelere seus trabalhos de treinamento.

Computação de alta performance

Com a high performance computing, HPC (computação de alta performance), cientistas e engenheiros podem solucionar problemas complexos que envolvem o uso intenso de computação. As cargas de trabalho de HPC, como a descoberta de petróleo e gás e análise genômica, processam grandes quantidades de dados que precisam ser acessados por várias instâncias de computação com altos níveis de throughput. O FSx for Lustre é ideal para cargas de trabalho de HPC e computação científica, pois fornece um sistema de arquivos otimizado para aumentar a performance e reduzir os custos das cargas de trabalho de alta performance, além de fornecer acesso ao sistema de arquivos em milhares de instâncias do EC2. O FSx for Lustre também se integra ao AWS ParallelCluster e ao AWS Batch, facilitando o uso com suas cargas de trabalho de HPC.

Transcodificação e processamento de mídia

As cargas de trabalho de processamento de mídia, como renderização de vídeo, efeitos visuais e produção de mídia, exigem recursos de armazenamento e computação para processar as grandes quantidades de dados criados. O FSx for Lustre fornece alta performance e baixas latências na medida necessária para processamento, distribuição e análise de arquivos de mídia digitais.

Veículos autônomos

Os clientes que desenvolvem sistemas de veículos autônomos geralmente testam os modelos executando simulações e treinamentos em grandes quantidades de dados das câmeras e dos sensores dos veículos para garantir a segurança dos veículos. O FSx for Lustre permite que você acesse esses dados simultaneamente a partir de milhares de nós com altos níveis de performance, permitindo executar simulações em escala mais facilmente e acelerar o desenvolvimento de modelos.

Big data e análise financeira

Casos de uso de análise de big data, como detecção de fraudes e análises financeiras, geram grandes quantidades de dados que exigem armazenamento de alta performance para capacitar aplicativos com uso intenso de dados. O processamento de volumes cada vez maiores de dados pode ser caro e complicado. O Amazon FSx for Lustre pode processar grandes quantidades de dados em escala e é otimizado para performance e custo, acelerando a descoberta e o valor para sua organização.

Electronic Design Automation, EDA (automação de projetos eletrônicos)

O recurso EDA é um aplicativo de alta performance usado para simular a performance e as falhas durante a fase de projeto, na produção de chips de silício. O FSx for Lustre fornece níveis de performance e flexibilidade que permitem inovar com mais rapidez, projetar e verificar novos produtos e escalar para atender à demanda.

Product-Page_Standard-Icons_01_Product-Features_SqInk
Confira os recursos do Amazon FSx for Lustre

Conheça os principais recursos do Amazon FSx for Lustre.

Saiba mais 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
Cadastre-se para obter uma conta gratuita

Obtenha acesso instantâneo ao nível gratuito da AWS. 

Cadastre-se 
Product-Page_Standard-Icons_03_Start-Building_SqInk
Comece a criar no console

Comece a criar com o Amazon FSx for Lustre no Console AWS.

Entrar