Publicado en: Nov 30, 2021

Amazon FSx for Lustre, un servicio que proporciona sistemas de archivos rentables, de alto rendimiento y escalables para cargas de trabajo informáticas, facilita aún más el procesamiento de los datos que residen en Amazon S3 al permitir que el contenido del bucket de S3 se actualice automáticamente a medida que los datos se actualizan en un sistema de archivos FSx for Lustre.

Integrado con Amazon S3, FSx for Lustre permite procesar fácilmente los conjuntos de datos de S3 con un sistema de archivos de alto rendimiento. Antes de hoy, cuando se vinculaba a un bucket de S3, un sistema de archivos FSx for Lustre presentaba de forma transparente los objetos de S3 como archivos y actualizaba su contenido automáticamente de forma continua a medida que se agregaban, cambiaban o eliminaban objetos del bucket de S3. Con el lanzamiento de hoy, FSx for Lustre también puede actualizar automáticamente el contenido del bucket S3 vinculado cuando se agregan, cambian o eliminan archivos del sistema de archivos. Gracias a esta característica, FSx for Lustre ahora proporciona un acceso rápido a los archivos para los conjuntos de datos de S3 que está diseñado para mantener los datos sincronizados entre el sistema de archivos y S3 en ambas direcciones. Ahora puede procesar simultáneamente los datos mediante flujos de trabajo basados en archivos y en objetos y compartir los resultados en tiempo casi real entre estos flujos de trabajo.

La característica de exportación automática está disponible sin costo adicional en los sistemas de archivos de Amazon FSx for Lustre con el tipo de implementación Persistent 2 en el Este de EE. UU. (Norte de Virginia), Este de EE. UU. (Ohio), Oeste de EE. UU. (Oregón), Canadá (Central), Europa (Fráncfort), Europa (Irlanda) y Asia-Pacífico (Tokio). Puede configurar el sistema de archivos para exportar automáticamente las actualizaciones a S3 mediante la consola de administración de AWS, la AWS CLI y los SDK de AWS. Obtenga más información sobre el uso de la exportación automática con sistemas de archivos FSx for Lustre en nuestro blog AWS News y en la documentación de Amazon FSx.