Amazon OpenSearch Ingestion

大規模なデータを Amazon OpenSearch ドメインと Serverless コレクションに取り込み、変換し、ルーティングします
デベロッパーガイドを見る

Amazon OpenSearch Service Ingestion を利用すべき理由

Amazon OpenSearch Ingestion は Amazon OpenSearch Service の機能で、これを使用すると、Amazon OpenSearch ドメインまたは Serverless コレクションへのデータの取り込み、フィルタリング、変換、エンリッチ化、およびルーティングができます。Amazon OpenSearch Ingestion は、さまざまなソースからデータを取り込むことができ、組み込みプロセッサの豊富なエコシステムを備えているため、最も複雑なデータ変換のニーズに対応できます。Amazon OpenSearch Ingestion は本質的にサーバーレスであり、最も要求の厳しいワークロードの要件に合わせて自動的にスケーリングされるため、オブザーバビリティやセキュリティのユースケースで複雑なデータパイプラインの管理に伴う複雑さを排除しながら、ビジネスロジックに集中できます。

Amazon OpenSearch Service の利点

ノイズの多いデータを重複排除、サンプリング、および低コストのストレージにルーティングすることで、ストレージコストの削減を実現します。
組み込みプロセッサを使用してデータを変換、フィルタリング、エンリッチ化し、スキーマを採用してオブザーバビリティを向上させ、セキュリティ調査にかかる時間を短縮することで、データ品質を強化します。
機密情報を送信先に届く前に編集したり難読化したりすることで、機密データを保護します。
条件付きロジックを使用してデータをルーティングし、データの越境を禁止する法律への準拠を維持します。

主な特徴

AWS は、多くのお客様が利用している OpenSearch プロジェクトの主要な貢献者です。このマネージドサービス内で、OpenSearch Data Prepper のすべての新しいイノベーションを利用できます。コミュニティが推進し、貢献しているこれらの機能のほかに、Amazon OpenSearch Ingestion Service は次の機能も提供します。

  • AWS マネージドのソフトウェアインストールとパッチ適用
  • AWS による 24 時間年中無休のサービスのモニタリングおよび修復
  • AWS によるバージョンアップグレード
  • 更新とアップグレードのダウンタイムなし
  • 可用性 SLA: 99.9%
  • サーバーレス、取り込みワークロードの自動スケーリング機能付き

お客様とパートナー

CyberArk のお客様レビュー

「クラウドベースのマルチテナントシステムであるCyberArk EPM (Endpoint Privilege Manager) では、AWS OpenSearch を使用して何百万ものエンドポイントを管理し、トラフィックの多いデータイベントを収集しています。Amazon OpenSearch Ingestion を活用することで、以前のセルフマネージド Logstash パイプラインを AWS マネージドパイプラインに置き換えました。これにより、独自のインフラストラクチャを管理する負担がなくなり、データインジェストのためのスケーラブルでコスト効率に優れた、信頼性が高い、安全なアーキテクチャを実現できました。この決定が行われたのは、CyberArk EPM が FedRAMP のハイインプロセスステータスを達成したことに加え、Amazon OpenSearch Ingestons が既にFedRAMPに準拠しているという利点があったためであり、これにより当社の製品において高いレベルのセキュリティを維持することが可能になりました」。

Ori Doolman、シニアソフトウェアアーキテクト - CyberArk EPM

CyberArk のロゴ

Calyptia のお客様レビュー

「Calyptiaでは、Cloud Native Computing Foundation プロジェクトである Fluentd と Fluent Bit の作成者および管理者として、12年以上にわたってデータインジェストに取り組んできました。これらのプロジェクトの最新バージョンでは、Fluent プロジェクトと OpenSearch Ingestion Service を組み合わせることで、ユーザーがファーストマイルでより多くのコントロールを行えるようになることを期待しています。統合サービスにより、ユーザーはインフラストラクチャの管理と保守について心配することなく、エージェントと処理を引き続きスケーリングできます」。

Anurag Gupta、共同創設者 - Calyptia

Calyptia のロゴ

Confluent のお客様レビュー

「Amazon OpenSearch チームと提携して、Apache Kafka と Confluent とのネイティブ統合を実現する OpenSearch 統合サービスを構築できることを嬉しく思います。この統合により、両社のお客様が OpenSearch 内の Apache Kafka を介してリアルタイムのデータにアクセスできるようになり、カスタマーエクスペリエンスを再考したり、リアルタイムのバックエンドオペレーションを構築したり、新しい製品やサービスを立ち上げたりできるようになります。Apache Kafka への主要な貢献者として、Confluent は完全なクラウドネイティブなデータストリーミングプラットフォームを構築することで、Kafka を 10 倍に進化させました。これにより、データが作成された場所から、私たち全員が住んでいるマルチ SaaS の世界で企業がアクションを起こせる場所にデータを移動できるようになります。このように、OpenSearch ユーザーは Confluent が統合されている何百ものデータソースから恩恵を受けることができます。両社のお客様が Confluent と OpenSearch でデータを活用しながら何を構築していくのか、とても楽しみです」。

Paul Mac Farland、パートナーおよびイノベーションエコシステム担当副社長 - Confluent

Confluent のロゴ