Amazon OpenSearch Ingestion ajoute la prise en charge de l'ingestion de données provenant de sources autogérées
Amazon OpenSearch Ingestion vous permet désormais d'ingérer des données provenant de clusters OpenSearch, Elasticsearch et Apache Kafka autogérés, vous évitant ainsi d'exécuter et de gérer des outils tiers tels que Logstash pour migrer vos données depuis des sources autogérées vers Amazon OpenSearch Service. Vous pouvez désormais migrer facilement ou répliquer en continu vos données depuis toutes les versions d'OpenSearch et les versions d'Elasticsearch 7.x, soit sur Amazon EC2, soit dans des environnements sur site, vers des clusters gérés par Amazon OpenSearch Service ou des collections sans serveur.
Vous pouvez désormais migrer les données de tous les index, ou uniquement d'index spécifiques, depuis un ou plusieurs clusters OpenSearch/ElasticSearch autogérés vers un ou plusieurs clusters gérés par Amazon OpenSearch Service ou des collections sans serveur. Amazon OpenSearch Ingestion détectera en permanence les nouveaux index qui doivent être traités dans le cluster source autogéré et peut même être programmé pour retraiter les index à un intervalle configurable afin de récupérer les nouveaux documents. De même, les pipelines d'ingestion d'Amazon OpenSearch peuvent consommer des données provenant d'un ou de plusieurs sujets d'un cluster Kafka autogéré et transformer les données avant de les écrire dans Amazon OpenSearch Service ou Amazon S3. Vous pouvez consulter la liste complète des fonctionnalités dans cet article de blog.
Cette fonctionnalité est disponible dans 15 régions AWS où Amazon OpenSearch Ingestion est actuellement pris en charge : USA Est (Ohio), USA Est (Virginie du Nord), USA Ouest (Oregon), USA Ouest (Californie du Nord), Europe (Irlande), Europe (Londres), Europe (Francfort), Asie-Pacifique (Tokyo), Asie-Pacifique (Sydney), Asie-Pacifique (Singapour), Asie-Pacifique (Mumbai), Asie-Pacifique (Séoul), Canada (Centre), Amérique du Sud (São Paulo) et Europe (Stockholm).
Pour en savoir plus, consultez la page web Amazon OpenSearch Ingestion et le Guide du développeur d’Amazon OpenSearch Service.