Publicado: Jun 5, 2023
O AWS Glue para Ray, uma opção de mecanismo de integração de dados no AWS Glue, agora está disponível. O AWS Glue para Ray ajuda os engenheiros de dados e os desenvolvedores de ETL (extração, transformação e carregamento) a escalar seus trabalhos em Python. O AWS Glue é um serviço de integração de dados escalável e com tecnologia sem servidor usado para descoberta, preparação, movimentação e integração de dados de várias fontes. O AWS Glue para Ray combina esse recurso de tecnologia sem servidor para integração de dados com o Ray (ray.io), uma nova e popular estrutura de computação de código aberto que ajuda você a escalar workloads do Python.
Semelhante aos mecanismos do Apache Spark e do Python no AWS Glue, você paga apenas pelos recursos que usa ao executar o código e não precisa configurar ou ajustar os recursos. O AWS Glue para Ray facilita o processamento distribuído do seu código Python em clusters de vários nós. Você pode criar e executar trabalhos do Ray em qualquer lugar no qual você possa executar trabalhos de ETL do AWS Glue. Isso inclui trabalhos existentes do AWS Glue, interfaces de linha de comando (CLIs) e APIs. Você pode selecionar o mecanismo do AWS Glue para Ray localmente ou por meio de cadernos no AWS Glue Studio e no Caderno do Amazon SageMaker Studio. Quando o trabalho do Ray estiver pronto, você poderá executá-lo sob demanda ou de forma programada.
O AWS Glue para Ray está disponível nas seguintes regiões da AWS: Leste dos EUA (Ohio), Leste dos EUA (N. da Virgínia), Oeste dos EUA (Oregon), Ásia-Pacífico (Tóquio) e Europa (Irlanda).
Para saber mais, consulte os Mecanismos de integração de dados do AWS Glue ou leia o Guia do desenvolvedor do AWS Glue: AWS Glue para Ray.