Amazon FSx for Lustre

Sistema de archivos de alto rendimiento para procesar datos almacenados localmente o en Amazon S3

Amazon FSx for Lustre provee un sistema de archivos de alto rendimiento para lograr un procesamiento rápido de cargas de trabajo como aprendizaje automático, informática de alto rendimiento (HPC), procesamiento de videos, modelado financiero y automatización de diseño electrónico (EDA). Por lo general, estas cargas de trabajo requieren que los datos se presenten a través de una interfaz rápida y escalable de sistemas de archivos y suelen tener conjuntos de datos guardados en almacenes de datos a largo plazo, como Amazon S3.

El funcionamiento de los sistemas de archivos de alto rendimiento normalmente requiere conocimientos especializados e implica una sobrecarga administrativa, por lo cual deberá aprovisionar servidores de almacenamiento y ajustar parámetros de rendimiento complejos. Con Amazon FSx, puede lanzar y ejecutar un sistema de archivos que tarde menos de un milisegundo en proveer acceso a los datos y que le permita realizar tareas de lectura y escritura en los datos a velocidades de hasta cientos de gigabytes por segundo de procesamiento y millones de IOPS.

Amazon FSx for Lustre funciona de manera nativa con Amazon S3, lo que facilita el procesamiento de conjuntos de datos en la nube con sistemas de archivos de alto rendimiento. Cuando está vinculado con un bucket de S3, un sistema de archivos de FSx for Lustre presenta de manera transparente objetos de S3 como archivos y permite escribir los resultados en S3. También puede utilizar FSx for Lustre como un sistema de archivos de alto rendimiento independiente para trasladar mediante ráfagas cargas de trabajo desde entornos locales a la nube. Al copiar los datos locales a un sistema de archivos de FSx for Lustre, puede hacer que los datos estén disponibles para un procesamiento rápido en las instancias de informática que se ejecutan en AWS. Con Amazon FSx, solo paga por los recursos que utiliza. No se exigen compromisos mínimos, costos iniciales de hardware o software ni cargos adicionales.

Descripción general: Amazon FSx for Lustre

Beneficios

Alto rendimiento y escalabilidad

Amazon FSx for Lustre ofrece el nivel de rendimiento necesario para atender una amplia variedad de cargas de trabajo de alto rendimiento. FSx for Lustre está creado sobre Lustre, un sistema de archivos de alto rendimiento conocido que está optimizado para el procesamiento de datos, con latencias menores a los milisegundos y un nivel de rendimiento que se ajusta para admitir cientos de gigabytes por segundo.

Acceso ininterrumpido a los datos almacenados localmente o en S3

Como Amazon FSx funciona de manera nativa con Amazon S3, se facilita el procesamiento de datos almacenados en S3 con una interfaz POSIX de alto rendimiento. Cuando está vinculado con un bucket de S3, FSx for Lustre presenta objetos de S3 como archivos de manera transparente. FSx for Lustre le permite escribir datos nuevos y modificados en el sistema de archivos nuevamente en el bucket de S3 en cualquier momento. FSx for Lustre también le permite trasladar mediante ráfagas cargas de trabajo locales a la nube con Amazon Direct Connect o VPN. 

Completamente administrado

Amazon FSx está completamente administrado, lo que facilita iniciar y ejecutar sistemas de archivos de alto rendimiento en la nube. Ya no tendrá que preocuparse por el mantenimiento ni el aprovisionamiento de hardware, la configuración de software ni el ajuste complejo del rendimiento de sistemas de archivos. En minutos, puede crear e iniciar un sistema de archivos de Amazon FSx mediante la consola de administración de AWS, la CLI de AWS o un SDK de AWS.

Rentabilidad

Amazon FSx for Lustre lo ayuda a optimizar los costos de almacenamiento para las cargas de trabajo de alto rendimiento: proporciona un almacenamiento económico y con alto rendimiento para el procesamiento de datos, mientras sus datos a largo plazo están almacenados en Amazon S3 o en otros almacenes de datos a largo plazo de bajo costo. El alto rendimiento de FSx for Lustre le permite ejecutar cargas de trabajo de procesamiento de datos con mayor rapidez, con lo que se logra reducir los plazos y el dinero invertidos en recursos informáticos. Con FSx for Lustre, solo paga por los recursos que utiliza. No se requieren compromisos mínimos ni pagos iniciales.

Interfaz de sistema de archivos nativo

Amazon FSx for Lustre es compatible con POSIX, así que usted puede utilizar sus actuales aplicaciones basadas en Linux sin tener que hacer ningún cambio. FSx for Lustre proporciona una interfaz de sistema de archivos nativo y funciona como cualquier sistema de archivos compatible con el sistema operativo Linux. También proporciona consistencia de lectura tras escritura y admite el bloqueo de archivos. Puede controlar el acceso a sus sistemas de archivos de FSx for Lustre con permisos de POSIX y Amazon Virtual Private Cloud (VPC).

Seguridad y conformidad

Amazon FSx cifra automáticamente sus datos en reposo. Si debe cumplir requisitos de conformidad normativa, tenga en cuenta que FSx for Lustre respeta las directrices de las normas PCI-DSS, ISO y SOC, y es elegible para HIPAA. Amazon FSx es compatible con Amazon Virtual Private Cloud (VPC), por lo que puede lanzar los recursos de su sistema de archivos de FSx for Lustre en su red virtual.

Funcionamiento

FSx_Lustre_diagram

Casos de uso

Aprendizaje automático

Las cargas de trabajo de aprendizaje automático utilizan enormes cantidades de datos de entrenamiento. Estas cargas de trabajo a menudo utilizan el almacenamiento de archivos compartido porque varias instancias informáticas necesitan procesar los conjuntos de datos para entrenamiento de forma simultánea. Amazon FSx es excelente para cargas de trabajo de aprendizaje automático, ya que proporciona un almacenamiento de archivos compartido con latencias bajas, constantes y de alto nivel de procesamiento para procesar los conjuntos de datos para entrenamiento de aprendizaje automático.

Informática de alto rendimiento (HPC)

La informática de alto rendimiento (HPC) les permite a los científicos e ingenieros resolver problemas complejos que exigen un uso intensivo de recursos informáticos. Las cargas de trabajo de HPC, como el descubrimiento de petróleo y gas y la genómica, procesan enormes volúmenes de datos que necesitan ser accedidos por múltiples instancias de informática con altos niveles de procesamiento. Amazon FSx es ideal para cargas de trabajo de HPC porque proporciona un sistema de archivos que está optimizado para el rendimiento y los costos de las cargas de trabajo de alto rendimiento y corta duración, con acceso al sistema de archivos a través de miles de instancias EC2.

Procesamiento multimedia y transcodificación

Los flujos de trabajo de procesamiento de datos multimedia, como la reproducción de vídeo, efectos visuales y producción multimedia, necesitan los recursos informáticos y de almacenamiento para manejar las enormes cantidades de datos que se crean. Amazon FSx proporciona el alto rendimiento y las latencias bajas que se necesitan para procesar, distribuir y analizar los archivos multimedia.

Vehículos autónomos

Con frecuencia, los clientes que desarrollan sistemas de vehículos autónomos ejecutan simulaciones y entrenamientos en volúmenes masivos de datos de cámaras y sensores de vehículos a los fines de garantizar la seguridad de los vehículos. Amazon FSx for Lustre le permite obtener acceso a dichos datos de manera simultánea a partir de cientos de nodos mediante un sistema de archivos estándar con una latencia menor a los milisegundos, cientos de gigabytes por segundo de rendimiento y miles de IOPS. FSx for Lustre le permite ejecutar simulaciones a escala, concretar miles de ejecuciones simuladas por semana y agilizar el desarrollo de modelos.

Análisis de big data

Los casos de uso de análisis de big data, incluida la detección de fraudes y el análisis financiero, generan volúmenes masivos de datos que necesitan almacenamiento de alto rendimiento para respaldar aplicaciones con uso intensivo de datos. La gestión del creciente volumen de datos puede ser costosa y compleja. Amazon FSx for Lustre cuenta con optimización de costos y rendimiento, lo que acelera el proceso de descubrimiento y valor para su organización.

Automatización de diseño electrónico (EDA)

La EDA es una aplicación de alto rendimiento común utilizada para simular el rendimiento y los errores durante la fase de diseño de producción de chips de silicio. FSx for Lustre proporciona el nivel de rendimiento y flexibilidad que le permite innovar más rápido, diseñar y verificar nuevos productos y ajustar la escala para satisfacer la demanda.

Product-Page_Standard-Icons_01_Product-Features_SqInk
Conozca las características de Amazon FSx for Lustre

Más información acerca de las características clave de Amazon FSx for Lustre.

Más información 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
Inscríbase para obtener una cuenta gratuita

Obtenga acceso instantáneo a la capa gratuita de AWS. 

Regístrese 
Product-Page_Standard-Icons_03_Start-Building_SqInk
Comience a crear en la consola

Comience a crear con Amazon FSx for Lustre en la consola de AWS.

Iniciar sesión