Publicado: Dec 23, 2019
O Amazon FSx for Luster, um sistema de arquivos de alto desempenho otimizado para cargas de trabalho, como machine learning, computação de alto desempenho, processamento de vídeo, modelagem financeira, automação de design eletrônico e análises, adicionou uma funcionalidade que facilita a sincronização de dados e permissões de arquivos entre arquivos o Amazon FSx e o Amazon S3. Além disso, o Amazon FSx quadruplicou a velocidade de execução dos sistemas de arquivos FSx vinculados aos buckets S3.
O Amazon FSx for Lustre trabalha de modo nativo com o Amazon S3, facilitando o processamento de conjuntos de dados em nuvem com sistemas de arquivos de alta performance. Quando vinculado a um bucket do S3, um sistema de arquivos FSx for Lustre apresenta de maneira transparente os objetos do S3 como arquivos e permite que você grave os resultados no S3. Até hoje, o Amazon FSx fornecia comandos do sistema de arquivos para exportar arquivos novos ou alterados do FSx para o S3, mas esses comandos não copiavam as permissões de arquivo ou forneciam a capacidade de monitorar ou cancelar a transferência.
Hoje, o Amazon FSx for Luster está lançando uma API (interface de programação de aplicativos) da AWS que permite exportar facilmente arquivos do FSx para o S3. Com a nova API, você pode iniciar, monitorar e cancelar a gravação de arquivos novos ou alterados para o S3. Por ser uma API nativa da AWS, você pode usá-la para orquestrar facilmente as tarefas de exportação de dados de fluxos de trabalho nativos da nuvem, como aplicativos sem servidor baseados em Lambda. Além de transferir dados e permissões de arquivo, essa API também permite transferir links simbólicos, metadados de propriedade de arquivo e carimbos de data/hora para o S3. Permissões de arquivo e outros metadados de arquivo são armazenados no S3, no mesmo formato usado pelo AWS DataSync e pelo AWS Storage Gateway.
Além disso, o FSx quadruplicou a velocidade na qual os metadados do arquivo são importados do S3, permitindo executar sistemas de arquivos FSx com suporte pelo S3 até quatro vezes mais rápido.
As novas funcionalidades, a API e as melhorias de desempenho estão disponíveis em todos os novos sistemas de arquivos em todas as regiões onde o FSx for Luster está disponível. Para obter mais informações, acesse a página de produto do Amazon FSx for Lustre e confira nossa postagem de blog aqui.