发布于: Apr 27, 2023

今天,Amazon OpenSearch Service 宣布推出 Amazon OpenSearch Ingestion,这是一个全新的完全托管式数据摄取层,您可以在其中摄取和处理 PB 级数据,然后在 OpenSearch 托管的集群或无服务器集合中为数据编制索引。OpenSearch Ingestion 提供无代码功能,可在 OpenSearch 中为数据编制索引之前对数据进行筛选、转换、编辑和路由。OpenSearch Ingestion 可以自动预置和扩展底层资源,即使面对最苛刻和不可预测的工作负载也是如此。 

OpenSearch Ingestion 由 OpenSearch Data Prepper 提供支持,这是一个开源的数据管道,用于预处理遥测数据(日志、分布式跟踪和指标),以便为在 OpenSearch 中进行分析和可视化做好准备。OpenSearch Ingestion 可用作自管型 Logstash 或其他流式数据管道的替代方案。由于 OpenSearch Ingestion 是一项完全托管式无服务器服务,它消除了管理用于摄取数据的多节点集群的复杂性,例如选择正确的实例类型、应用安全补丁以及添加或删除节点以针对数据量波动进行优化,使您的团队能够专注于更关键的工作。

要开始使用 OpenSearch Ingestion,您可以在 AWS 管理控制台中创建管道,并定义源、处理器以及目标集群或集合。您也可以从最常见的摄取使用案例的蓝图开始。

OpenSearch Ingestion 现已在下列 AWS 区域推出:美国东部(俄亥俄州)、美国东部(弗吉尼亚州北部)、美国西部(俄勒冈州)、美国西部(北加利福尼亚)、欧洲地区(爱尔兰)、欧洲地区(伦敦)、欧洲地区(法兰克福)、亚太地区(东京)、亚太地区(悉尼)和亚太地区(新加坡)。

要了解更多信息,请参阅 Amazon OpenSearch Ingestion 网页和 Amazon OpenSearch Service 开发人员指南