6sense Insights Inc. améliore la capacité de mise à l'échelle et accélère la mise sur le marché en migrant vers Amazon EKS

Basée à San Francisco, en Californie, 6sense fournit des analyses de données, des informations sur les ventes et d'autres prévisions afin que les équipes chargées des recettes B2B puissent mieux comprendre leurs acheteurs et leurs clients. En 2014, l'entreprise a commencé à utiliser Apache Mesos, une solution open source qui gère les clusters de calcul, pour orchestrer ses infrastructures de pipeline de données. « Au fur et à mesure de notre croissance, Apache Mesos a rencontré plusieurs limites », explique George Liaw, directeur de l'ingénierie des infrastructures chez 6sense. « Nous ne pouvions proposer des ressources informatiques qu'à un seul cadre à la fois, ce qui a ralenti nos processus. Nous avons également rencontré des problèmes de mise à l'échelle. » 

À la recherche d'une solution plus évolutive, 6sense a commencé à explorer Kubernetes, un système d'orchestration de conteneurs open source, afin d'améliorer ses pipelines de données. En 2018, l'entreprise a migré ses services d'applications et d'API vers deux clusters Kubernetes et a commencé à utiliser kOps, un jeu d'outils permettant d'installer, d'exploiter et de supprimer des clusters Kubernetes dans le cloud. Bien qu'une architecture conteneurisée ait amélioré l'agilité de 6sense, kOps n'était pas entièrement géré, ce qui a obligé l'équipe de 6sense à effectuer d'importantes opérations et gestions quotidiennes. « En utilisant kOps, nous avons dû faire face à des frais de maintenance bien trop importants, explique George Liaw. Nous avons réalisé que si nous pouvions réduire ces tâches manuelles, notre équipe pourrait consacrer son temps au service client plutôt qu'à la gestion de Kubernetes. »

En 2019, 6sense a choisi d'investir dans AWS Enterprise Support, qui fournit un service de type conciergerie pour aider les entreprises à obtenir des résultats et à réussir dans le cloud. L'équipe d'AWS Enterprise Support a aidé l'entreprise à réaliser qu'elle pouvait atténuer les problèmes auxquels elle était confrontée en migrant vers Amazon EKS, qui est entièrement géré. « Pour 6sense, Amazon EKS était presque une solution de remplacement immédiate qui, comme par magie, fonctionnait mieux », explique George Liaw.

En septembre 2021, 6sense a commencé à migrer ses dernières charges de travail des solutions héritées fonctionnant sur Apache Mesos et kOps vers Amazon EKS. L'entreprise a migré la majorité de ses charges de travail de services d'applications et d'API vers Amazon EKS au cours de la première semaine et a développé une solution d'orchestration de pipeline stable et utilisable fin 2021. « Une fois que nous avons commencé à exécuter des clusters Amazon EKS, nous avons découvert de précieuses fonctionnalités, explique George Liaw. Nous avons pu tester des clusters avec des configurations plus flexibles sans nous soucier de leur stabilité. » En décembre 2021, l'entreprise exécutait 7 à 8 clusters sur Amazon EKS et avait achevé 80 % de sa migration. 

Grâce à Amazon EKS, 6sense a constaté une amélioration de 400 % de son débit de charge de travail, lui permettant de traiter 1 à 2 To de données par jour, et ce nombre ne cesse de croître. Grâce à cette rapidité, 6sense peut prendre en charge des charges de travail très complexes et fournir rapidement des informations précieuses à ses clients, avec un gain en vitesse de 65 %. 

La solution basée sur AWS de 6sense est non seulement extrêmement rapide, mais également hautement évolutive. « Nous pouvons mettre à l'échelle un cluster sur Amazon EKS pratiquement à l'infini afin d'exécuter autant de tâches en parallèle que possible », explique Premal Shah, vice-président senior de l'ingénierie et de l'infrastructure chez 6sense. « Nous n'avons plus à nous préoccuper de la quantité de travail que nous pouvons effectuer à l'heure. » L'entreprise s'appuie également sur les instances Spot Amazon Elastic Compute Cloud (Amazon EC2), qui sont utilisées pour exécuter de grandes charges de travail tout en réalisant des économies significatives et pour accélérer les charges de travail en exécutant des tâches parallèles. En utilisant les instances Spot Amazon EC2, 6sense peut fournir la capacité dont elle a besoin pour soutenir son expansion future tout en optimisant les coûts. 

6sense a également considérablement accéléré ses vitesses de développement en migrant vers AWS. Sur Apache Mesos, la capacité de l'entreprise à créer, tester et déployer de nouveaux pipelines de données était limitée en raison des limites du débit des conteneurs. Sur Amazon EKS, 6sense peut gérer jusqu'à 300 % de conteneurs supplémentaires par heure. Elle peut également exécuter le même nombre de conteneurs Docker sur Amazon EKS dans un temps réduit d'environ 50 % par rapport à sa solution précédente. En atteignant ce niveau de rapidité et de capacité de mise à l'échelle, 6sense a amélioré la productivité des développeurs et accéléré sa mise sur le marché de nouvelles applications et fonctionnalités. 

Amazon EKS étant un service Kubernetes entièrement géré, 6sense n'a plus besoin de se concentrer sur la gestion ou l'exploitation de ses clusters Kubernetes. Grâce à ce gain de temps, son équipe peut consacrer du temps à l'amélioration de l'expérience client. « Sur AWS, nous sommes en mesure d'accroître la rapidité des développeurs, de réduire les formalités administratives inutiles et de servir nos clients du mieux que nous pouvons, déclare George Liaw. Nous sommes en mesure de leur proposer de nouvelles fonctionnalités, informations et produits aussi rapidement que possible. Plus vite nous innovons pour servir nos clients, meilleure est l'expérience pour tout le monde, y compris pour notre équipe. »

En migrant vers des clusters Amazon EKS entièrement gérés, 6sense peut mettre à l'échelle et gérer efficacement son pipeline de données, ce qui lui a permis de fournir des informations à ses clients plus rapidement. La société prévoit d'améliorer encore ses capacités de mise à l'échelle à l'aide de Karpenter, un outil de mise à l'échelle automatique de clusters Kubernetes open source développé en collaboration avec AWS. 

Sur AWS, 6sense a permis à ses employés de se concentrer sur l'innovation, et l'entreprise continuera à utiliser les services AWS pour développer de nouvelles solutions génératrices de valeur. « Chez 6sense, nous sommes en mesure d'agir rapidement et d'innover sur AWS sans aucune contrainte », déclare George Liaw.