Amazon FSx for Lustre

Sistema de arquivos totalmente gerenciado para cargas de trabalho com uso intenso de computação

O Amazon FSx for Lustre é um sistema de arquivos totalmente gerenciado e otimizado para cargas de trabalho com uso intenso de computação, como Computação de Alta Performance (HPC), Machine Learning e fluxos de trabalho com processamento de dados de mídia. Muitas dessas aplicações exigem sistemas de arquivos em paralelo de alto desempenho e baixas latências de escalabilidade. Geralmente, operar esses sistemas de arquivos requer conhecimento especializado e sobrecarga administrativa, além de exigir provisionamento de servidores de armazenamento e ajuste de parâmetros complexos de desempenho. Com o Amazon FSx, você pode lançar e executar um sistema de arquivos Lustre com capacidade para processar grandes conjuntos de dados com taxa de transferência de até centenas de gigabytes por segundo, milhões de IOPS e latências inferiores a um milissegundo.

O Amazon FSx for Lustre é perfeitamente integrado ao Amazon S3, facilitando a vinculação de conjuntos de dados de longo prazo com sistemas de arquivos de alta performance para execução de cargas de trabalho com uso intenso de computação. Você pode copiar automaticamente dados do S3 para o FSx for Lustre, executar as cargas de trabalho e gravar os resultados no S3. Além disso, o FSx for Lustre permite processar picos de cargas de trabalho locais com uso intenso de computação na AWS, acessando o sistema de arquivos FSx por meio do Amazon Direct Connect ou de uma VPN. O FSx for Lustre ajuda a otimizar o custo do armazenamento para cargas de trabalho com uso intenso de computação. O serviço oferece armazenamento não replicado de baixo custo e alta performance para processamento de dados, com os dados de longo prazo armazenados de forma resiliente no Amazon S3 e outros datastores de baixo custo. Com o Amazon FSx, você paga apenas pelos recursos usados. Sem compromissos mínimos, investimentos iniciais em hardware e software ou taxas adicionais.

Visão geral do Amazon FSx for Lustre

Benefícios

Performance escalável massiva

O Amazon FSx fornece o desempenho ideal para atender às mais exigentes cargas de trabalho com uso intenso de computação. O Amazon FSx fornece taxa de transferência de até centenas de gigabytes por segundo e milhões de IOPS. O Amazon FSx for Lustre tem suporte para a alta largura de banda necessária à escalabilidade para processar petabytes de dados e executar operações de arquivos com latências inferiores a um milissegundo.

Acesso fácil a dados armazenados localmente ou no S3

Como o Amazon FSx é integrado ao Amazon S3, fica mais fácil acessar os dados do S3 para executar cargas de trabalho com uso intenso de computação. Os dados do S3 são copiados automaticamente para o FSx for Lustre, e você pode gravar os resultados no S3. Além disso, o FSx for Lustre permite processar picos de cargas de trabalho locais com uso intenso de computação na AWS, acessando o sistema de arquivos FSx por meio do Amazon Direct Connect ou de uma VPN. Dessa forma, é possível executar cargas de trabalho com uso intenso de computação no FSx for Lustre e armazenar os dados de longo prazo no S3 ou em armazenamentos locais. 

Totalmente gerenciado

Como o Amazon FSx é totalmente gerenciado, fica mais fácil lançar e executar sistemas de arquivos de alta performance na nuvem. Você não precisa mais se preocupar com provisionamento e manutenção de hardware, configuração de software e ajuste de desempenho complexo para o sistema de arquivos Lustre. Em questão de minutos, você pode criar e lançar um sistema de arquivos do Amazon FSx usando o Console de Gerenciamento da AWS, o AWS CLI ou um AWS SDK.

Econômico

O Amazon FSx for Lustre ajuda a otimizar o custo do armazenamento para cargas de trabalho com uso intenso de computação. O serviço oferece armazenamento não replicado econômico e de alta performance para processamento de dados, com armazenamento durável para dados de longo prazo no Amazon S3 e em outros armazenamentos de dados de baixo custo. Você paga apenas pelos recursos usados. Sem compromissos mínimos ou taxas antecipadas.

Interface com sistema de arquivos nativos

O Amazon FSx for Lustre é compatível com POSIX, portanto, você pode usar os aplicativos atuais baseados em Linux sem precisar fazer alterações. O FSx for Lustre fornece uma interface com sistema de arquivos nativos e funciona como qualquer sistema de arquivos com o sistema operacional Linux. Ele fornece também consistência de leitura pós gravação, além de suporte para bloqueio de arquivos.

Segurança e conformidade

O Amazon FSx criptografa automaticamente os dados em repouso. Se você estiver sujeito à conformidade regulamentar, o FSx for Lustre é compatível com PCI-DSS e ISO, além de ser qualificado para HIPAA. O Amazon FSx tem suporte para o Amazon Virtual Private Cloud (VPC). Com isso, você pode lançar os recursos do sistema de arquivos do FSx for Lustre em uma rede virtual compartilhada entre o datacenter de sua organização e a AWS ou uma organização parceira.

Como funciona

FSx_Lustre_diagram

Casos de uso

Machine Learning

As cargas de trabalho de Machine Learning usam grandes quantidades de dados de treinamento. Essas cargas de trabalho geralmente usam um armazenamento de arquivos compartilhado porque várias instâncias de computação precisam processar os conjuntos de dados de treinamento simultaneamente. O Amazon FSx é ideal para cargas de trabalho de Machine Learning, porque oferece um agrande capacidade de armazenamento de arquivos compartilhados em paralelo com alta taxa de transferência e baixas latências consistentes para processar os conjuntos de dados de treinamento de Machine Learning.

Computação de Alta Performance (HPC)

Com a Computação de Alta Performance (HPC), cientistas e engenheiros podem solucionar problemas complexos que envolvem o uso intenso de computação. As cargas de trabalho de HPC, como a descoberta de petróleo e gás e a genômica, processam grandes quantidades de dados que precisam ser acessados por várias instâncias de computação com altos níveis de taxas transferência. O Amazon FSx é ideal para cargas de trabalho de HPC, pois fornece um sistema de arquivos otimizado para aumentar o desempenho e reduzir os custos das cargas de trabalho curtas com uso intenso de computação, além de fornecer acesso ao sistema de arquivos em milhares de instâncias do EC2.

Transcodificação e processamento de mídia

As cargas de trabalho de processamento de mídia, como renderização de vídeo, efeitos visuais e produção de mídia, exigem recursos de armazenamento e computação para processar as grandes quantidades de dados criados. O Amazon FSx fornece alto desempenho e baixas latências na medida necessária para processamento, distribuição e análise de arquivos de mídia digitais.

Cloud bursting local

Quando executa cargas de trabalho com uso intenso de computação no local, geralmente você precisa de mais capacidade de armazenamento e computação para atender aos picos de demanda. Os recursos locais podem se tornar rapidamente insuficientes. O Amazon FSx viabiliza permite atender aos picos de demanda das cargas de trabalho locais com uso intenso de computação na AWS, importando dados por meio do Amazon Direct Connect e uma VPN.

Análise de big data

Casos de uso de análise de big data, como processamento sísmico, detecção de fraudes, genômica e modelagem climática, geram grandes quantidades de dados que exigem armazenamento de alto desempenho para capacitar aplicativos com uso intenso de dados. Gerenciar o volume crescente de dados pode ser uma tarefa complexa e dispendiosa. O Amazon FSx for Lustre é otimizado para alto desempenho e redução de custos, o que se reflete em tempo de descoberta mais rápido, além de mais vantagens para a organização.

Electronic Design Automation (EDA)

O recurso EDA é um aplicativo HPC comum usado para simular o desempenho e as falhas durante a fase de projeto, na produção de chips de silício. Essas cargas de trabalho com uso intenso de computação podem gerar custos elevados e provisionamento em excesso ou provisionamento insuficiente e limitações de capacidade. O FSx for Lustre fornece níveis de desempenho e flexibilidade que permitem inovar com mais rapidez, projetar e verificar novos produtos e dimensionar para atender à demanda.

Product-Page_Standard-Icons_01_Product-Features_SqInk
Confira os recursos do Amazon FSx for Lustre

Conheça os principais recursos do Amazon FSx for Lustre.

Saiba mais 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
Cadastre-se para obter uma conta gratuita

Obtenha acesso instantâneo ao nível gratuito da AWS. 

Cadastrar-se 
Product-Page_Standard-Icons_03_Start-Building_SqInk
Comece a criar no console

Comece a criar com o Amazon FSx for Lustre no Console AWS.

Entrar