Amazon OpenSearch Ingestion

Ingérez, transformez et acheminez des données à grande échelle vers les domaines Amazon OpenSearch et les collections sans serveur

Pourquoi choisir Amazon OpenSearch Service pour l’ingestion ?

Amazon OpenSearch Ingestion est une fonctionnalité d'Amazon OpenSearch Service qui vous permet d'ingérer, de filtrer, de transformer, d'enrichir et d'acheminer des données vers un domaine Amazon OpenSearch ou une collection sans serveur. Amazon OpenSearch Ingestion est capable d'ingérer des données provenant d'un large éventail de sources et dispose d'un riche écosystème de processeurs intégrés pour répondre à vos besoins de transformation de données les plus complexes. Amazon OpenSearch Ingestion fonctionne par nature sans serveur et évoluera automatiquement pour répondre aux exigences de vos charges de travail les plus exigeantes. Vous pouvez ainsi vous concentrer sur votre logique métier tout en vous débarrassant de la complexité de la gestion de pipelines de données complexes pour vos cas d'utilisation en matière d'observabilité et de sécurité.

Avantages d’Amazon OpenSearch Service

Réduisez les coûts de stockage en dédupliquant, en échantillonnant et en acheminant les données bruyantes vers un stockage à moindre coût.
Renforcez la qualité des données en les transformant, en les filtrant et en les enrichissant à l'aide de processeurs intégrés et en adoptant des schémas pour accélérer l'observabilité et réduire les délais d’examen de sécurité.
Protégez les données sensibles en rédigeant et en masquant les informations sensibles avant qu'elles n'arrivent à destination.
Acheminez les données à l'aide d'une logique conditionnelle afin de garantir la conformité aux lois sur la résidence des données.

Fonctionnalités principales

AWS est l’un des principaux contributeurs du projet OpenSearch, qu’utilisent de nombreux clients. Vous obtiendrez toutes les innovations pour OpenSearch Data Prepper au sein de ce service géré. Au-delà de ces fonctionnalités, auxquelles la communauté participe et contribue, Amazon OpenSearch Ingestion Service propose également les suivantes :

  • Installation de logiciels gérés par AWS et correctifs
  • AWS surveille et répare le service, 24 heures sur 24, 7 jours sur 7.
  • AWS met les versions à niveau.
  • Aucun temps d'arrêt pour les mises à jour et les mises à niveau
  • SLA en matière de disponibilité : 99,9 %
  • Sans serveur, avec autoscaling pour les charges de travail d'ingestion

Clients et partenaires

Évaluation client de CyberArk

« Chez CyberArk EPM (Endpoint Privilege Manager), un système multiple basé sur le cloud, nous gérons des millions de points de terminaison et collectons des événements de données à fort trafic à l'aide d'AWS OpenSearch. En tirant parti d'Amazon OpenSearch Ingestion, nous avons remplacé notre ancien pipeline Logstash autogéré par un pipeline géré par AWS, ce qui nous a permis de nous affranchir de la gestion de notre propre infrastructure et nous a fourni une architecture plus évolutive, rentable, fiable et sécurisée pour notre ingestion de données. Cette décision a été prise avec l'avantage supplémentaire que CyberArk EPM a obtenu le statut FedRAMP High In-Process, alors qu'Amazon OpenSearch Ingestion est déjà conforme à FedRAMP, ce qui nous permet de maintenir un haut niveau de sécurité dans notre offre ».

Ori Doolman, architecte logiciel senior - CyberArk EPM

Logo CyberArk

Évaluation client de Calyptia

« Chez Calyptia, nous travaillons sur l'ingestion de données depuis plus de 12 ans en tant que créateurs et responsables du projet Cloud Native Computing Foundation, Fluentd et Fluent Bit. Avec les dernières versions de ces projets, nous sommes impatients de permettre aux utilisateurs d'avoir plus de contrôle dès le début grâce à la combinaison des projets Fluent et du service d'ingestion OpenSearch. Grâce au service d'ingestion, les utilisateurs peuvent continuer à faire évoluer les agents et le traitement sans avoir à se soucier de la gestion et de la maintenance de l'infrastructure ».

Anurag Gupta, cofondateur de Calyptia

Logo Calyptia

Évaluation client de Confluent

« Nous sommes ravis de collaborer avec l'équipe Amazon OpenSearch alors qu'elle développe son service OpenSearch Ingestion, qui fournira une intégration native avec Apache Kafka et Confluent. Cette intégration aidera nos clients communs à accéder à des données en temps réel via Apache Kafka au sein d'OpenSearch afin qu'ils puissent repenser les expériences client, créer des opérations de backend en temps réel ou lancer de nouveaux produits et services. En tant que principal contributeur à Apache Kafka, Confluent a multiplié Kafka par 10 en développant une plateforme de streaming de données complète et native pour le cloud qui vous permet de transférer des données depuis l'endroit où elles ont été créées vers un endroit où les entreprises peuvent agir dans le monde multi-SaaS dans lequel nous vivons tous. Cela permet aux utilisateurs d'OpenSearch de bénéficier des centaines de sources de données auxquelles Confluent est intégré. Nous sommes impatients de voir ce que nos clients communs vont créer en mettant des données en mouvement avec Confluent et OpenSearch ».

Paul Mac Farland, vice-président de Partner & Innovation Ecosystem - Confluent

Logo Confluent