Publicado: Apr 27, 2023
Hoje, o Amazon OpenSearch Service anuncia a ingestão do Amazon OpenSearch, um novo nível de ingestão de dados totalmente gerenciado que permite ingerir e processar dados em escala de petabytes antes de indexá-los em clusters gerenciados pelo OpenSearch ou coleções de tecnologia sem servidor. A ingestão do OpenSearch fornece um recurso sem código para filtrar, transformar, redigir e rotear dados antes de indexá-los no OpenSearch. A ingestão do OpenSearch provisiona e dimensiona automaticamente os recursos subjacentes até mesmo para as workloads mais exigentes e imprevisíveis.
A ingestão do OpenSearch é desenvolvida pelo OpenSearch Data Prepper, um pipeline de dados de código aberto para pré-processamento de dados de telemetria (logs, rastreamentos distribuídos e métricas) para prepará-los para análise e visualização no OpenSearch. A ingestão do OpenSearch pode ser usada como uma alternativa ao autogerenciamento do Logstash ou a outros pipelines de dados de streaming. Como a ingestão do OpenSearch é um serviço de tecnologia sem servidor totalmente gerenciado, ele elimina as complexidades de gerenciar um cluster de vários nós para ingestão de dados, como escolher os tipos certos de instância, aplicar patches de segurança e adicionar ou remover nós para otimizar as flutuações do volume de dados, permitindo que sua equipe se concentre em trabalhos mais importantes.
Para começar a usar a ingestão do OpenSearch, você pode criar um pipeline no Console de Gerenciamento da AWS e definir sua origem, seus processadores e o cluster ou coleção de destino. Você também pode começar com um esquema para os casos de uso de ingestão mais comuns.
A ingestão do OpenSearch agora está disponível nas seguintes regiões da AWS: Leste dos EUA (Ohio), Leste dos EUA (N. da Virgínia), Oeste dos EUA (Oregon), Oeste dos EUA (N. da Califórnia), Europa (Irlanda), Europa (Londres), Europa (Frankfurt), Ásia-Pacífico (Tóquio), Ásia-Pacífico (Sydney) e Ásia-Pacífico (Singapura).
Para saber mais, consulte a página da Web da Ingestão do Amazon OpenSearch e o Guia do desenvolvedor do Amazon OpenSearch Service.