Veröffentlicht am: Apr 27, 2023
Heute kündigt Amazon OpenSearch Service Amazon OpenSearch Ingestion an, eine neue, vollständig verwaltete Datenerfassungsstufe, mit der Sie Daten im Petabyte-Bereich aufnehmen und verarbeiten können, bevor Sie sie in von OpenSearch verwalteten Clustern oder serverlosen Sammlungen indizieren. OpenSearch Ingestion bietet eine codefreie Funktion, mit der Daten gefiltert, transformiert, redigiert und weitergeleitet werden können, bevor sie in OpenSearch indiziert werden. OpenSearch Ingestion stellt die zugrunde liegenden Ressourcen automatisch bereit und skaliert sie selbst für die anspruchsvollsten und unvorhersehbarsten Workloads.
OpenSearch Ingestion wird von OpenSearch Data Prepper unterstützt, einer Open-Source-Datenpipeline zur Vorverarbeitung von Telemetriedaten (Protokolle, verteilte Spuren und Metriken), um sie für die Analyse und Visualisierung in OpenSearch vorzubereiten. OpenSearch Ingestion kann als Alternative zur Selbstverwaltung von Logstash oder anderen Streaming-Daten-Pipelines verwendet werden. Da es sich bei OpenSearch Ingestion um einen vollständig verwalteten Serverless-Dienst handelt, entfällt die Komplexität der Verwaltung eines Clusters mit mehreren Knoten für die Datenaufnahme wie die Auswahl der richtigen Instance-Typen, das Anwenden von Sicherheitspatches und das Hinzufügen oder Entfernen von Knoten zur Optimierung von Datenvolumenschwankungen, sodass sich Ihr Team auf wichtigere Aufgaben konzentrieren kann.
Um mit OpenSearch Ingestion zu beginnen, können Sie in der AWS-Managementkonsole eine Pipeline erstellen und Ihre Quelle, Prozessoren und den Zielcluster oder die Zielsammlung definieren. Sie können auch mit einer Vorlage für die häufigsten Erfassungsfälle beginnen.
OpenSearch Ingestion ist jetzt in den folgenden AWS-Regionen verfügbar: USA Ost (Ohio), USA Ost (Nord-Virginia), USA West (Oregon), USA West (Nordkalifornien), Europa (Irland), Europa (London), Europa (Frankfurt), Asien-Pazifik (Tokio), Asien-Pazifik (Sydney) und Asien-Pazifik (Singapur).
Weitere Informationen finden Sie auf der Amazon OpenSearch Ingestion-Webseite und im Amazon OpenSearch Service-Entwicklerhandbuch.