Publicado en: Nov 30, 2021
Amazon FSx for Lustre, un servicio que proporciona sistemas de archivos rentables, de alto rendimiento y escalables para cargas de trabajo informáticas, facilita aún más el procesamiento de los datos que residen en Amazon S3 al permitir que el contenido del sistema de archivos FSx for Lustre se actualice automáticamente a medida que los datos se eliminan o se mueven en S3.
Integrado con Amazon S3, FSx for Lustre permite procesar fácilmente los conjuntos de datos de S3 con un sistema de archivos de alto rendimiento. Antes de hoy, cuando se vinculaba el sistema de archivos a un bucket de S3, FSx for Lustre presentaba de forma transparente los objetos de S3 como archivos y actualizaba su contenido automáticamente de forma continua a medida que se agregaban o cambiaban objetos en el bucket de S3. Con el lanzamiento de hoy, FSx for Lustre proporciona una opción adicional que está diseñada para actualizar automáticamente el sistema de archivos cuando los objetos en los buckets de S3 vinculados se eliminan o se mueven. Esta nueva opción permite mantener el contenido del sistema de archivos sincronizado mientras se realizan muchos tipos de actualizaciones (adiciones, cambios, eliminaciones y movimientos) en los buckets de S3 vinculados, lo que permite ejecutar flujos de trabajo paralelos que manipulan datos en S3 y en el sistema de archivos al mismo tiempo.
La nueva funcionalidad está disponible sin costo adicional en todos los sistemas de archivos de Amazon FSx for Lustre creados después del 23 de julio de 2020 en todas las regiones donde FSx esté disponible. Puede configurar el sistema de archivos para importar automáticamente las actualizaciones de S3 mediante la consola de administración de AWS, la AWS CLI y los SDK de AWS. Obtenga más información sobre el uso de la importación automática con sistemas de archivos FSx for Lustre en nuestro blog AWS News y en la documentación de Amazon FSx.