Publicado en: Nov 28, 2022
AWS Glue para Ray es una nueva opción de motor en AWS Glue. Los ingenieros de datos pueden usar este nuevo servicio para procesar grandes conjuntos de datos con Python y las bibliotecas populares de Python. AWS Glue es un servicio de integración de datos escalable y sin servidor que se utiliza para descubrir, preparar, trasladar e integrar datos de múltiples fuentes. AWS Glue para Ray combina esa opción sin servidor para la integración de datos con Ray (ray.io), un nuevo y conocido marco informático de código abierto que lo ayuda a escalar las cargas de trabajo de Python.
Solo paga por los recursos que usa mientras ejecuta el código y no necesita configurar ni ajustar ningún recurso. AWS Glue para Ray facilita el procesamiento distribuido de su código Python en clústeres de varios nodos. Puede crear y ejecutar trabajos de Ray en cualquier lugar donde ejecute trabajos de ETL (extracción, transformación y carga) de AWS Glue. Esto incluye trabajos existentes de AWS Glue, interfaces de línea de comandos (CLI) y API. Puede seleccionar el motor Ray a través de cuadernos en AWS Glue Studio, cuadernos de Amazon SageMaker Studio, o localmente. Cuando el trabajo de Ray esté listo, puede ejecutarlo bajo demanda o según un cronograma.
AWS Glue para Ray está disponible en versión preliminar en las siguientes regiones de AWS: Este de EE. UU. (Ohio), Este de EE. UU. (Norte de Virginia), Oeste de EE. UU. (Oregón), Asia-Pacífico (Tokio) y Europa (Irlanda).
Para obtener más información, consulte nuestra documentación.