Autodesk crée une solution d'analyses de journaux unifiée sur AWS pour gagner en perspicacité.

Pour améliorer ses fonctionnalités d'analyse de journaux pour des analyses des causes d'origine, Autodesk a cherché à créer une solution de données de journaux unifiée basée sur le cloud en s'appuyant sur Amazon Web Services (AWS). « Nous avions déjà utilisé les services AWS auparavant pour diverses fonctionnalités internes chez Autodesk, et nous souhaitions étendre cette utilisation en développant un système de journalisation unifié, » déclare Li.

Amazon Data Firehose agit comme la couche de transfert des données pour la journalisation des données, et le service géré Amazon pour Apache Flink est utilisé pour révéler des mesures de surveillance en temps réel comme le temps de réponse et les pics de taux d'erreur. Une fois que les données de consignation passent par ce pipeline, elles sont envoyées à Amazon CloudWatch pour des mesures supplémentaires qui sont affichées dans des tableaux de bord standardisés pour l'ensemble de l'entreprise. Ces métriques incluent un récapitulatif de l'ensemble du trafic, y compris les temps de réponse, les erreurs et le total des requêtes, les métriques d'API telles que les centiles des temps de réponse, le nombre de requêtes réussies et le nombre de requêtes d'erreur, le processeur, le réseau et les disques pour chaque processeur, ainsi que les métriques Amazon CloudWatch pour les services AWS.

Parallèlement, Amazon Firehose transmet les données des journaux à Amazon OpenSearch Service, un service géré qui vous permet d'effectuer facilement de l'analytique de journaux interactifs, de surveiller les applications en temps réel, de rechercher des sites web, etc. « [Amazon OpenSearch Service] permet d'effectuer des activités d'investigation des données et aide à trouver et résoudre les problèmes d'application plus rapidement », explique Li. Amazon Athena fournit une requête analytique interactive plus approfondie et AWS X-Ray fournit des outils pour analyser les données de suivi. De plus, l'intégration à Amazon OpenSearch Service de l'outil de visualisation des données en open source, Kibana, permet aux tableaux de bord de contrôler les données en temps réel.

La solution de journalisation unifiée créée sur Amazon OpenSearch Service offre une meilleure visibilité des journaux de données plus rapidement. « [Amazon OpenSearch Service] permet de collecter et de mesurer les données de journalisation de manière plus cohérente et en temps réel », explique Li. « Ce service fournit une analyse des données en profondeur qui permet d'avoir de meilleures corrélations entre les événements du journal, notamment en fournissant des réponses aux problèmes d'application plus rapidement. » Par exemple, les équipes Autodesk ont créé des tableaux de bord qui identifient les tendances et les schémas pour les anomalies qui peuvent aider à rapidement corréler les enregistrements détaillés pour des investigations détaillées.

Plus particulièrement, Autodesk permet de disposer de meilleures analyses d'investigation, en utilisant des données d'instrumentation pour détecter et résoudre les erreurs. Le temps moyen de récupération s'en trouve grandement amélioré. La société peut détecter des anomalies d'utilisation d'API comme le taux d'erreur et les pics de temps de réponse. Les événements d'alerte Amazon CloudWatch raccourcissent le temps moyen de détection et le temps pour appeler les équipes de réponse aux incidents.

La société cherche également à obtenir des informations plus détaillées de ses données d'analyse afin d'améliorer son logiciel et son service client. « Finalement, nous améliorons nos produits logiciels et offrons un meilleur service à nos clients grâce à la visibilité en temps réel que nous avons sur les données de journaux, » déclare Li.

En travaillant avec AWS, Autodesk crée des fonctionnalités d'analyse de journaux hautement scalables pour réduire le coût global de la solution.

En déchargeant la gestion de son architecture et des clusters Elasticsearch sur AWS, Autodesk a pu facilement créer sa solution de journalisation unifiée. « Bien que notre équipe informatique ne compte que quelques personnes, nous pouvons développer et maintenir une puissante solution de journalisation en laissant AWS prendre en charge la technologie, » ajoute Li. « En conséquence, nous n'avons plus à consacrer nos ressources à la gestion de l'infrastructure sous-jacente, et nous pouvons mettre notre solution à l'échelle à la demande et ainsi prendre en charge le volume croissant des données de consignation. »

Autodesk bénéficie maintenant d'une solution qui lui garantit une vue centralisée des données de consignation, comme les performances et les temps d'arrêt des applications.

« Nous avons supprimé les cloisons entre les données qui étaient liées au fait que différentes équipes utilisant des solutions de consignation, » déclare Li. « Tout le monde peut accéder à la même vue avec la solution AWS, ce qui signifie que tout le monde reçoit des informations mises à jour dans le statut global de la plateforme. En utilisant les tableaux de bord Kibana, nous pouvons créer un même langage que nous pouvons tous utiliser pour diagnostiquer les problèmes. En tant que société, nous pouvons tous adopter une approche plus unifiée pour rechercher et résoudre les problèmes. »