Publicado: Nov 17, 2023
A Ingestão do Amazon OpenSearch agora oferece buffer persistente ao ingerir dados de streaming de fontes baseadas em push, oferecendo durabilidade de dados e simplificando a arquitetura de ingestão de dados. Agora, os clientes podem usar o buffer persistente para ingerir dados de origens http, como coletores FluentD, FluentBit e OpenTelemetry, sem a necessidade de configurar um buffer independente. O buffer persistente na Ingestão do Amazon OpenSearch é de tecnologia sem servidor e escalável de forma elástica para atender às necessidades de throughput até mesmo das workloads mais exigentes.
Os clientes podem ativar o buffer persistente para seus pipelines existentes ou criar novos pipelines com o buffer persistente ativado. A Ingestão do Amazon OpenSearch garantirá então que todos os dados ingeridos sejam mantidos em um buffer baseado em disco que é replicado em várias AZs para maior durabilidade antes de ser roteado para um destino. O armazenamento em disco do buffer persistente evita que ele fique sobrecarregado quando os dados se acumulam devido ao fato de os destinos estarem inacessíveis, garantindo que a contrapressão não seja aplicada na origem. Além do reconhecimento de ponta a ponta que já é oferecido para fontes baseadas em pull, a Ingestão do Amazon OpenSearch agora oferece durabilidade completa dos dados para todas as suas origens.
Este atributo está disponível em todas as regiões comerciais da AWS nas quais a Ingestão do Amazon OpenSearch é oferecida.
Para saber mais, consulte a página Ingestão do Amazon OpenSearch e o Guia do desenvolvedor do Amazon OpenSearch Service.