Publicado: Nov 17, 2023
Agora, o AWS Glue para Apache Spark oferece suporte à conectividade nativa com o Amazon OpenSearch Service, que permite que os usuários leiam e gravem dados do Amazon OpenSearch Service com eficiência, sem a necessidade de instalar ou gerenciar bibliotecas de conectores do OpenSearch. Os usuários já podem usar dados armazenados nos índices do OpenSearch Service como origem ou destino na interface visual sem código do tipo arrastar e soltar do AWS Glue Studio ou diretamente em um script de trabalho de ETL do AWS Glue. Quando combinado com os recursos de extração, transformação e carregamento (ETL) do AWS Glue, esse novo conector simplifica a criação de pipelines de ETL, evitando que desenvolvedores de ETL percam tempo criando e mantendo pipelines de dados.
Para começar a usar, crie uma nova conexão do Amazon OpenSearch Service no Catálogo de Dados do AWS Glue e adicione uma origem ou destino do Open Search Service ao trabalho de ETL do Glue. Ao ler o OpenSearch Service, os desenvolvedores podem escolher um índice inteiro do OpenSearch Service como origem ou enviar uma consulta para selecionar dados de índice específicos. Ao gravar no OpenSearch Service, os usuários podem enriquecer, limpar e transformar dados no Glue antes de carregar os resultados em um índice do OpenSearch Service. Com esses recursos, os desenvolvedores de ETL podem trabalhar com o OpenSearch Service e o AWS Glue em diversos cenários.
Esses recursos estão disponíveis em todas as regiões comerciais da AWS que oferecem o AWS Glue. Para saber mais, acesse a documentação do AWS Glue.