Q : Qu'est-ce qu'Amazon Elasticsearch Service ?

Amazon Elasticsearch Service est un service géré qui permet de déployer, de gérer et de mettre à l'échelle facilement des clusters Elasticsearch dans le cloud AWS.

Q : Quelle est la version d'Elasticsearch prise en charge par Amazon Elasticsearch Service ?

Amazon Elasticsearch Service prend actuellement en charge les versions 5.5, 5.3, 5.1, 2.3 et 1.5 d'Elasticsearch.

Découvrez gratuitement AWS

Créez un compte gratuit
Vous pouvez également vous connecter à la console

L’offre gratuite d’AWS comprend 750 heures par mois d’une instance t2.micro.elasticsearch ou t2.small.elasticsearch et 10 Go par mois de stockage facultatif Amazon EBS (magnétique ou à usage général)

Voir les détails relatifs au niveau gratuit d'AWS »

 

 

Q : Qu'est-ce qu'un domaine Amazon Elasticsearch ?

Les domaines Amazon Elasticsearch sont des clusters Elasticsearch créés via l'interface de ligne de commande, l'API ou la console Amazon Elasticsearch Service. Chaque domaine correspond à un cluster Elasticsearch placé dans le cloud et associé aux ressources de calcul et de stockage que vous avez spécifiées. Vous pouvez créer puis supprimer des domaines, définir leurs attributs d'infrastructure, mais aussi contrôler leur accès et leur sécurité. Il est possible d'exécuter plusieurs domaines Amazon Elasticsearch.

Q : Quelles opérations Amazon Elasticsearch Service effectue-t-il à ma place ?

Amazon Elasticsearch Service gère les tâches liées à la configuration d'un domaine, de la mise à disposition de la capacité d'infrastructure demandée dans l'environnement en réseau à l'installation du logiciel Elasticsearch. Une fois votre domaine actif, Amazon Elasticsearch Service se charge d'automatiser les tâches d'administration courantes, telles que les sauvegardes, la surveillance des instances et l'application de correctifs aux logiciels. Amazon Elasticsearch Service s'intègre à Amazon CloudWatch, ce qui permet de générer des métriques vous informant sur l'état de vos domaines. Amazon Elasticsearch Service propose également différentes options permettant de modifier les paramètres de stockage et d'instance de votre domaine. Vous pouvez ainsi ajuster facilement votre domaine en fonction des besoins de votre application.

Q : Amazon Elasticsearch Service prend-il en charge les API Elasticsearch à code source libre ?

Amazon Elasticsearch Service prend en charge la plupart des API couramment utilisées. Le code, les applications et les outils populaires que vous utilisez déjà avec vos environnements Elasticsearch actuels fonctionneront donc sans problème. Pour obtenir une liste complète des opérations Elasticsearch prises en charge, consultez notre documentation.

Haut de la page >>


Q : Est-il possible de créer et de modifier un domaine Amazon Elasticsearch via la console Amazon Elasticsearch Service ?

Oui. Vous pouvez créer un domaine Amazon Elasticsearch en quelques clics à l'aide de l'assistant de création de domaines disponible dans la console. Lorsque vous créez ce domaine, vous pouvez définir le nombre et le type d'instances, ainsi que les volumes EBS que vous souhaitez allouer au domaine. La console permet également de modifier ou de supprimer des domaines Amazon Elasticsearch existants.

Q : Amazon Elasticsearch Service prend-il en charge Amazon VPC ?

Oui; Amazon Elasticsearch Service s'intègre à Amazon VPC. Quand vous sélectionnez un accès par VPC, les adresses IP de votre VPC sont liées à votre domaine Amazon Elasticsearch Service, et l'ensemble du trafic réseau reste au sein du réseau AWS et n'est pas accessible depuis Internet. En outre, vous pouvez utiliser des groupes de sécurité et des politiques IAM pour limiter l'accès à vos domaines Amazon Elasticsearch Service.

Q : Puis-je utiliser des templates CloudFormation pour mettre en service des domaines Amazon ES ?

Oui. AWS CloudFormation prend en charge Amazon ES. Pour en savoir plus, consultez la documentation de référence sur les templates CloudFormation.

Q : Amazon Elasticsearch Service prend-il en charge la configuration de nœuds principaux dédiés ?

Oui. Vous pouvez configurer des nœuds principaux dédiés pour vos domaines. Quand vous sélectionnez une configuration maître dédiée, vous pouvez spécifier le type d'instance et leur nombre.

Q : Est-il possible de créer plusieurs index Elasticsearch dans un même domaine Amazon Elasticsearch ?

Oui. Vous pouvez créer plusieurs index Elasticsearch dans un même domaine Amazon Elasticsearch. Elasticsearch distribue automatiquement les index et les réplicas associées entre les domaines alloués au domaine.

Q : Comment intégrer des données dans mon domaine Amazon Elasticsearch Service ?

Amazon Elasticsearch Service prend en charge trois options pour l'intégration de données :

  • Pour de grands volumes de données, nous recommandons Amazon Kinesis Firehose, un service entièrement géré qui s'adapte automatiquement au débit de vos données et ne requiert aucune administration continue. Ce service peut également transformer, traiter par lot et compresser des données avant de les charger.
  • Amazon Elasticsearch Service peut être intégré à Logstash. Il est possible de configurer votre domaine Amazon Elasticsearch Service en tant que magasin de données pour tous les journaux provenant de votre installation Logstash.
  • Vous pouvez utiliser des API Elasticsearch natives, telles que index et bulk, pour charger des données dans votre domaine.

Q : Amazon Elasticsearch Service peut-il être intégré à Logstash ?

Oui. Amazon Elasticsearch Service peut être intégré à Logstash. Vous pouvez configurer votre domaine Amazon Elasticsearch en tant que stockage dorsal pour tous les journaux transférés via votre implémentation de Logstash. Il est possible de définir les contrôles d'accès à votre domaine Amazon Elasticsearch de deux manières : vous pouvez utiliser la signature des requêtes, qui permet d'authentifier les appels provenant de votre implémentation de Logstash, ou appliquer des politiques IAM basées sur les ressources, lesquelles permettent d'inclure les adresses IP des instances exécutant votre implémentation de Logstash.

Q : Amazon Elasticsearch Service peut-il être intégré à Kibana ?

Oui. Amazon Elasticsearch Service intègre une installation de Kibana déployée avec votre domaine Amazon Elasticsearch Service.

Q : Est-il possible de créer des rapports personnalisés avec la version de Kibana fournie avec Amazon Elasticsearch Service ?

Oui. Kibana permet de créer et d'enregistrer des rapports personnalisés via l'interface utilisateur. Pour en savoir plus sur l'utilisation de Kibana, consultez la documentation de Kibana.

Q : Quelles sont les options de stockage proposées pour Amazon Elasticsearch Service ?

Vous avez le choix entre un stockage local sur l'instance et des volumes EBS. Si vous sélectionnez un stockage sur volume EBS pendant la création du domaine, vous pouvez augmenter et diminuer la taille du volume de stockage selon les besoins.

Q : Quels sont les types de volumes EBS pris en charge par Amazon Elasticsearch Service ?

Vous avez le choix entre des volumes EBS magnétiques, à usage général et à IOPS provisionnés.

Q : La capacité de stockage EBS pouvant être allouée au domaine Amazon Elasticsearch est-elle limitée ?

Oui. Le service Amazon Elasticsearch permet d'utiliser un volume EBS (d'une taille maximale de 1,5 To) par instance associée à un domaine. Dans la mesure où chaque domaine Amazon Elasticsearch Service est limité par défaut à 20 nœuds de données, vous pouvez allouer environ 30 To de stockage EBS pour chaque domaine. Vous pouvez demander une augmentation de cette limite de service jusqu'à 100 instances par domaine auprès du Centre d'assistance AWS. Avec 100 instances, vous pouvez allouer environ 150 To de stockage EBS à chaque domaine.

Haut de la page >>


Q : Les programmes exécutés sur les serveurs de mon propre centre de données peuvent-ils accéder à mes domaines Amazon Elasticsearch ?

Oui. Les programmes dotés d'un accès au réseau Internet public peuvent accéder aux domaines Amazon Elasticsearch Service à travers un point de terminaison public. Si votre centre de données est déjà connecté à Amazon VPC via Direct Connect ou un tunnel SSH, vous pouvez également utiliser un accès par VPC. Dans les deux cas, vous pouvez configurer des politiques IAM et des groupes de sécurité pour autoriser les programmes exécutés sur des serveurs en dehors d'AWS à accéder à vos domaines Amazon Elasticsearch. Cliquez ici pour en savoir plus sur les requêtes signées.

Q : Comment effectuer la migration de données depuis mon cluster Elasticsearch existant vers un nouveau domaine Amazon Elasticsearch ?

Pour la migration de données depuis un cluster Elasticsearch existant, créez un instantané de ce cluster et stockez-le dans votre compartiment Amazon S3. Créez ensuite un domaine Amazon Elasticsearch et chargez-y les données provenant de l'instantané via l'API de restauration d'Elasticsearch.

Q : Comment mettre à l'échelle un domaine Amazon Elasticsearch ?

Amazon Elasticsearch Service met à votre disposition une console, une API et une interface de ligne de commande pour vous aider à gérer le dimensionnement de vos domaines Amazon Elasticsearch. Vous pouvez mettre à l'échelle votre domaine Amazon Elasticsearch en ajoutant, supprimant ou modifiant des instances ou des volumes de stockage, selon les besoins de vos applications. Amazon Elasticsearch Service s'intègre avec Amazon CloudWatch pour vous fournir des mesures sur l'état de vos domaines Amazon Elasticsearch, ce qui vous permet de prendre des décisions pertinentes en matière de dimensionnement.

Q : Le dimensionnement d'un domaine Amazon Elasticsearch impose-t-il une interruption de l'activité ?

Non. Lorsque vous mettez à l'échelle votre domaine Amazon Elasticsearch en ajoutant ou modifiant des instances et des volumes de stockage, ces opérations sont réalisées en ligne et n'entraînent aucune interruption.

Q : Quelles sont les options proposées par Amazon Elasticsearch Service en cas de défaillance d'un nœud ?

Amazon Elasticsearch Service détecte automatiquement les nœuds défaillants et les remplace. Le service obtient de nouvelles instances, puis renvoie les requêtes et mises à jour de documents Elasticsearch vers ces nouvelles instances. Si le nœud ne peut pas être remplacé, les clients peuvent utiliser les instantanés de leur cluster pour redémarrer leur domaine avec des données préchargées.

Q : Amazon Elasticsearch Service permet-il la réplication sur plusieurs zones ?

Oui. Les clients peuvent activer la fonctionnalité « Zone Awareness » (Prise en compte des zones) lorsqu'ils créent ou modifient un domaine Amazon Elasticsearch. Lorsque la fonction Zone Awareness est activée, Amazon Elasticsearch Service répartit les instances assurant le fonctionnement du domaine sur deux zones de disponibilité différentes. Ensuite, si la réplication est activée dans le moteur Elasticsearch, Elasticsearch répartit les réplicas entre les différentes instances afin de permettre la réplication sur plusieurs zones.

Q : Amazon Elasticsearch Service génère-t-il des mesures de performance dans Amazon CloudWatch ?

Oui. Amazon Elasticsearch Service génère plusieurs mesures de performance via Amazon CloudWatch, dont le nombre de nœuds, l'état des clusters, les documents pouvant faire l'objet de recherches, les mesures EBS (le cas échéant), l'utilisation du processeur, de la mémoire et de l'espace disque pour les données et les nœuds maîtres. Pour obtenir la liste complète des mesures CloudWatch disponibles, merci de vous référer à la documentation du service.

Q : Je souhaite réaliser une analyse de sécurité ou résoudre des problèmes opérationnels sur mon déploiement Amazon Elasticsearch Service. Puis-je obtenir un historique de tous les appels d'API Amazon Elasticsearch Service effectués depuis mon compte ?

Oui. AWS CloudTrail est un service Web qui enregistre les appels d'API AWS pour votre compte et vous les présente sous forme de fichier journal. L'historique des appels d'API AWS généré par AWS CloudTrail permet de réaliser une analyse de sécurité, un suivi des modifications au niveau des ressources, ainsi que des audits de conformité. Pour en savoir plus sur ce service, consultez la page de présentation détaillée d'AWS CloudTrail ; pour l'activer, rendez-vous sur la page d'accueil d'AWS Management Console pour CloudTrail.

Q : Qu'est-ce qu'un instantané ?

Un instantané est une copie de votre domaine Amazon Elasticsearch réalisée à un instant précis.

Q : Quelle est l'utilité des instantanés ?

Il peut être utile de créer des instantanés en prévision d'une perte de données consécutive à la défaillance d'un nœud ou d'une panne matérielle, bien que ce dernier cas soit peu probable. Vos instantanés pourront vous permettre de restaurer votre domaine Amazon Elasticsearch ou d'en créer un nouveau à partir de données préchargées. Les sauvegardes sont aussi souvent utilisées à des fins d'archivage. Les instantanés sont stockés dans Amazon S3.

Q : Amazon Elasticsearch Service fournit-il des instantanés automatiques ?

Oui. Par défaut, Amazon Elasticsearch Service est configuré pour créer automatiquement un instantané par jour de chaque domaine Amazon Elasticsearch. Ces instantanés quotidiens sont réalisés entre minuit et 1 h UTC. Les clients peuvent, cependant, modifier l'heure à laquelle sont réalisés les instantanés automatiques en fonction de leurs besoins.

Q : Est-il possible de modifier les paramètres par défaut de l'instantané automatique fourni chaque jour par Amazon Elasticsearch Service ?

Oui. Vous pouvez modifier l'heure à laquelle est réalisé l'instantané automatique afin de l'adapter au rythme de votre application.

Q : Combien de temps les instantanés automatiques quotidiens sont-ils conservés par Amazon Elasticsearch Service ?

Amazon Elasticsearch Service conserve les instantanés automatiques quotidiens pendant 14 jours.

Q : Les instantanés automatiques quotidiens me seront-ils facturés ?

Les instantanés automatiques quotidiens ne donnent lieu à aucuns frais supplémentaires. Ils sont stockés gratuitement dans un compartiment S3 dédié à Amazon Elasticsearch Service et sont mis à disposition lorsque vous souhaitez restaurer un nœud.

Q : Puis-je créer des instantanés supplémentaires pour mes domaines Amazon Elasticsearch si besoin ?

Oui. Vous pouvez utiliser l'API d'instantané Elasticsearch pour créer manuellement des instantanés s'ajoutant à ceux générés automatiquement par Amazon Elasticsearch Service sur une base quotidienne. Les instantanés manuels sont stockés dans votre compartiment S3 et sont soumis aux frais d'utilisation d'Amazon S3 en vigueur.

Q : Les instantanés créés manuellement peuvent-ils être utilisés pour restaurer un domaine en cas de défaillance ?

Oui. Les clients peuvent créer un nouveau domaine Amazon Elasticsearch et y charger les données provenant de leur instantané via l'API de restauration d'Elasticsearch.

Q : Que deviennent mes instantanés si je supprime mon domaine Amazon Elasticsearch ?

Les instantanés quotidiens conservés par Amazon Elasticsearch Service sont supprimés en même temps que le domaine. Avant de supprimer un domaine, pensez donc, si vous le souhaitez, à créer un instantané de ce domaine dans vos propres compartiments S3 en utilisant le processus manuel de création d'instantanés. Les instantanés stockés dans votre compartiment S3 ne sont pas affectés par la suppression de votre domaine Amazon Elasticsearch.

Q : Que sont les journaux lents ?

Les journaux lents sont des fichiers journaux permettant de suivre les performances de différentes étapes d'une opération. Elasticsearch expose deux types de journaux lents :

  • les journaux lents d'indexation, qui fournissent des informations sur le processus d'indexation et qui peuvent servir à l'ajustement de la configuration de ce dernier ;
  • les journaux lents de recherche, qui fournissent des informations sur la vitesse et les performances des requêtes et des recherches. Ces journaux permettent d'ajuster les performances de tous types d'opérations de recherche sur Elasticsearch. 

Pour obtenir des informations complètes sur les journaux lents d'Elasticsearch, consultez la documentation Elasticsearch

Q : Comment puis-je activer les journaux lents sur Amazon ES ?

Les journaux lents peuvent être activés par simple clic sur un bouton de la console ou via notre CLI et nos API. Pour plus d'informations, consultez notre documentation.

Q : Puis-je n'activer les journaux lents que pour des indices précis ?

Oui. Vous pouvez mettre à jour les paramètres pour un indice spécifique afin d'activer ou de désactiver les journaux lents pour celui-ci. Pour plus d'informations, reportez-vous à la documentation.

Q : Est-ce que l'activation des journaux lents dans Amazon ES active automatiquement la journalisation de tous les indices ?

Non. L'activation des journaux lents dans Amazon ES active l'option permettant de publier les journaux générés dans Amazon CloudWatch Logs pour les indices dans le domaine donné. Toutefois, pour générer les journaux, vous devez mettre à jour les paramètres pour un ou plusieurs indices afin de démarrer le processus de journalisation. Pour en savoir plus sur la configuration de l'indice en vue d'activer les journaux lents, consultez notre documentation.

Q : Si je désactive les journaux lents dans Amazon ES, est-ce que cela veut dire que les fichiers journaux ne seront plus générés ?

Non. La génération des fichiers journaux dépend des paramètres d'indice. Pour désactiver la génération des fichiers journaux, vous devez mettre à jour la configuration d'indice. Pour en savoir plus sur la configuration d'indice en vue d'activer les journaux lents, consultez notre documentation.

Q : Puis-je ajuster la granularité de la journalisation ?

Oui. Elasticsearch expose plusieurs niveaux de journalisation. Vous devez définir le niveau approprié dans la configuration de votre indice. Pour en savoir plus sur la configuration d'indice en vue d'activer les journaux lents, consultez notre documentation.

Q : Est-ce que l'activation des journaux lents me coûte quelque chose ?

Lorsque les journaux lents sont activés, Amazon ES commence à publier des journaux générés sur Amazon CloudWatch Logs. Amazon ES ne facture pas l'activation des journaux lents. Toutefois, les frais standard de CloudWatch s'appliquent.

Q : Y a-t-il une limite de taille pour chaque entrée de journal ?

Oui. Chaque entrée de journal effectuée dans CloudWatch sera limitée à 255 000 caractères. Si votre entrée de journal est supérieure, elle sera tronquée pour rentrer dans les 255 000 caractères.

Q : Quelle est la bonne pratique recommandée pour l'utilisation des journaux lents ?

Les journaux lents ne sont requis que pour le dépannage de vos indices ou les performances d'ajustement. L'approche recommandée consiste à n'activer que la journalisation pour les indices pour lesquels vous avez besoin d'informations supplémentaires sur les performances. Une fois l'investigation terminée, pensez à désactiver la journalisation afin qu'elle ne vous expose pas à des coûts supplémentaires. Pour plus de détails, référez-vous à notre documentation.

Q : Comment puis-je consommer les journaux à partir de CouldWatch Logs ?
CloudWatch propose plusieurs moyens de consommer les journaux. Vous pouvez consulter les données du journal, l'exporter vers S3 ou le traiter en temps réel. Pour en savoir plus, consultez le CloudWatch Logs Developer Guide

Q : Les journaux lents sont-ils disponibles pour toutes les versions d'Elasticsearch prises en charge par Amazon ES ?

Oui. Les journaux lents peuvent être activés pour toutes les versions d'Elasticsearch prises en charge par Amazon ES. Cela dit, il existe quelques différences dans la façon dont les paramètres des journaux peuvent être spécifiés pour chaque version d'Elasticsearch. Veuillez vous référer à la documentation pour plus de détails.

Q : Est-ce que le cluster subira un temps d'arrêt lors de l'activation ou la désactivation de la journalisation ?

Non. Il n'y aura aucun temps d'arrêt. Chaque fois que le statut du journal sera mis à jour, nous déploierons un nouveau cluster en arrière-plan et nous remplacerons le cluster existant par un nouveau. Ce processus évitera tout temps d'arrêt. Toutefois, comme un nouveau cluster est déployé, la mise à jour du statut du journal ne sera pas instantanée.  

Haut de la page >>


Q : Comment sécuriser mon domaine Amazon Elasticsearch Service ?

Si vous utilisez un VPC pour sécuriser vos applications, vos données et votre trafic réseau, vous pouvez définir un accès VPC pour Amazon Elasticsearch Service afin de contrôler l'accès réseau avec vos groupes de sécurité VPC. Vous pouvez également utiliser des politiques basées sur IAM pour contrôler avec précision les rôles IAM pouvant exécuter des tâches administratives, utiliser les API Elasticsearch et accéder aux ressources dans le domaine jusqu'au niveau de l'index.

Si votre domaine Amazon Elasticsearch Service doit être accessible depuis Internet, vous pouvez spécifier un accès public. Avec un accès public, vous pouvez contrôler l'accès au point de terminaison au niveau des adresses IP et exiger une authentification avec des rôles IAM. Les politiques IAM peuvent contrôler l'accès aux domaines Amazon Elasticsearch et aux sous-ressources qu'ils contiennent, notamment les index.

Il est également possible de configurer des politiques IAM pour limiter l'accès à l'API de gestion pour les opérations telles que la création et le dimensionnement des clusters, ainsi qu'à l'API Elasticsearch pour le chargement de documents et l'exécution de requêtes Elasticsearch, par exemple.

Q : Comment définir un accès VPC pour Amazon Elasticsearch Service ?

L'accès VPC peut être configuré pendant la création d'un domaine Amazon Elasticsearch Service. L'accès VPC peut être défini en quelques clics dans la console ou via notre interface de ligne de commande et nos API. Pour en savoir plus, consultez le guide du développeur Amazon Elasticsearch Service.

Q : Si je définis un accès VPC pour mon domaine Amazon Elasticsearch Service, comment puis-je accéder à Kibana ?

Quand un accès VPC est activé, le point de terminaison pour Amazon Elasticsearch Service est uniquement accessible au sein du VPC client. Si vous désirez utiliser votre ordinateur portable pour accéder à Kibana en dehors de votre VPC, vous devez connecter l'ordinateur portable au VPC via un VPN ou Direct Connect.

Haut de la page >>


Q : Comment mon utilisation d'Amazon Elasticsearch Service me sera-t-elle facturée ?

Vous ne payez que ce que vous utilisez et il n'y a pas de frais minimum ou d'installation. Vous êtes facturé sur la base des éléments suivants :

  • Heures d'instance Amazon Elasticsearch – Selon la classe (p. ex., Standard Small, Large, Extra Large) de l'instance Amazon Elasticsearch consommée. Les heures d'instance Amazon Elasticsearch partiellement consommées sont facturées en tant qu'heures entières.
  • Stockage (Go par mois) – Capacité de stockage EBS que vous avez réservée pour votre instance Amazon Elasticsearch. Si vous modifiez votre capacité de stockage au cours du mois, votre facture sera ajustée au prorata.
  • IOPS dimensionnés par mois – Tarif des volumes EBS IOPS dimensionnés, indépendamment des IOPS consommés (pour le stockage IOPS dimensionné (SSD) Amazon Elasticsearch Service uniquement).
  • Transfert de données – Application des tarifs AWS standard pour les transferts de données.

Pour obtenir des informations détaillées sur la facturation, consultez la page relative aux tarifs d'Amazon Elasticsearch Service.


Q : Quelles sont les dates de début et de fin de facturation pour mon domaine Amazon Elasticsearch ?

La facturation commence dès que l'instance Amazon Elasticsearch est disponible. Elle se poursuit ensuite jusqu'à ce que l'instance Amazon Elasticsearch soit fermée, ce qui se produit lors de sa suppression ou en cas de défaillance de l'instance.

Q : Comment sont définies les heures d'instance facturables pour Amazon Elasticsearch Service ?

Une heure d'instance Amazon Elasticsearch est facturée pour chaque heure d'exécution de votre instance en état de disponibilité. Si vous souhaitez cesser la facturation d'une instance Amazon Elasticsearch, vous devez supprimer le domaine afin d'éviter que des heures d'instance supplémentaires ne vous soient facturées. Les heures d'instance Amazon Elasticsearch partiellement consommées sont facturées en tant qu'heures entières.

Haut de la page >>