发布于: Nov 17, 2023
Amazon OpenSearch Ingestion 现在可在从基于推送的来源摄取流式数据时提供持久缓冲，从而提供数据持久性并简化数据摄取架构。客户现在可以使用持久缓冲从 FluentD、FluentBit 和 OpenTelemetry 收集器等 http 来源摄取数据，而无需设置独立的缓冲区。Amazon OpenSearch 摄取中的持久缓冲是无服务器的，可以弹性扩展，以满足要求苛刻的工作负载的吞吐量需求。
客户可以为现有管道启用持久缓冲功能，也可以在启用持久缓冲功能的情况下创建新管道。然后，Amazon OpenSearch Ingestion 会确保将摄取的所有数据持久存储到磁盘缓冲区，该缓冲区可在多个可用区之间进行复制以确保持久性，然后再将数据路由到目的地。具有持久缓冲的磁盘存储可防止由于无法到达目的地而导致数据积累时不堪重负，确保不会对数据来源施加反向压力。除了为基于拉取的来源提供了端到端确认功能外，Amazon OpenSearch Ingestion 现在还为其所有来源提供了完全持久的数据。
此功能在目前已推出 Amazon OpenSearch Ingestion 的所有 AWS 商业区域提供。
要了解更多信息，请参阅 Amazon OpenSearch Ingestion 网页和 Amazon OpenSearch Service 开发人员指南。