6sense Insights Inc. Migliora la scalabilità e accelera la velocità di immissione sul mercato migrando ad Amazon EKS

Con sede a San Francisco, California, 6sense fornisce analisi dei dati, approfondimenti sulle vendite e altre previsioni in modo che i team che si occupano delle entrate tra aziende possano comprendere meglio i propri acquirenti e clienti. Nel 2014, l'azienda ha iniziato a utilizzare Apache Mesos, una soluzione open source che gestisce i cluster di elaborazione, per orchestrare i suoi framework di pipeline di dati. "Man mano che crescevamo, abbiamo riscontrato diverse limitazioni su Apache Mesos", ha affermato George Liaw, direttore dell'ingegneria delle infrastrutture di 6sense. "Potevamo offrire risorse di elaborazione solo a un framework alla volta, il che rallentava i nostri processi. Abbiamo anche riscontrato problemi di scalabilità". 

Alla ricerca di una soluzione più scalabile, 6sense ha iniziato a esplorare Kubernetes, un sistema di orchestrazione di container open source, per migliorare le sue pipeline di dati. Nel 2018, l'azienda ha migrato i propri servizi applicativi e API su due cluster Kubernetes e ha iniziato a utilizzare kOps, un set di strumenti per l'installazione, il funzionamento e l'eliminazione dei cluster Kubernetes nel cloud. Sebbene un'architettura containerizzata abbia migliorato l'agilità per 6sense, kOps non era completamente gestito, il che richiedeva al team di 6sense di eseguire ogni giorno un numero significativo di operazioni e gestione continua. "Grazie a kOps, abbiamo riscontrato un sovraccarico di manutenzione eccessivo", ha affermato Liaw. "Ci siamo resi conto che se fossimo riusciti a ridurre queste attività manuali, il nostro team avrebbe potuto dedicare il proprio tempo al servizio del cliente invece di gestire Kubernetes".

Nel 2019, 6sense ha scelto di investire nel supporto AWS Enterprise, che fornisce un servizio simile a quello di un concierge e supportare così le aziende per raggiungere risultati e il successo nel cloud. Il team di supporto AWS Enterprise ha aiutato l'azienda a capire che poteva alleviare i problemi che stava affrontando migrando ad Amazon EKS, che è completamente gestito. "Per 6sense, Amazon EKS era quasi un sostituto immediato che ha funzionato magicamente meglio", ha dichiarato Liaw.

A settembre 2021, 6sense ha iniziato a migrare i carichi di lavoro rimanenti da soluzioni legacy in esecuzione su Apache Mesos e kOps ad Amazon EKS. L'azienda ha migrato la maggior parte dei carichi di lavoro delle applicazioni e dei servizi API su Amazon EKS entro la prima settimana e ha sviluppato una soluzione di orchestrazione delle pipeline stabile e utilizzabile entro la fine del 2021. "Una volta che abbiamo iniziato a utilizzare i cluster Amazon EKS, abbiamo sbloccato funzionalità preziose", ha dichiarato Liaw. "Potremmo testare i cluster con configurazioni più flessibili senza preoccuparci della loro stabilità". A dicembre 2021, l'azienda gestiva 7-8 cluster su Amazon EKS e aveva completato l'80% della migrazione. 

Utilizzando Amazon EKS, 6sense ha registrato un miglioramento del 400% nella velocità di trasmissione effettiva del carico di lavoro, che gli ha consentito di elaborare 1-2 TB di dati al giorno e in crescita. Con questa velocità, 6sense è in grado di supportare carichi di lavoro altamente complessi e fornire rapidamente informazioni preziose ai propri clienti, il 65% più velocemente. 

La soluzione basata su AWS di 6sense non è solo estremamente veloce ma anche altamente scalabile. "Possiamo scalare un cluster su Amazon EKS quasi all'infinito per eseguire quante più cose in parallelo possibile", afferma Premal Shah, vicepresidente senior di ingegneria e infrastruttura di 6sense. "Non dobbiamo più preoccuparci di quanto possiamo eseguire all'ora". L'azienda si affida anche alle istanze Spot di Amazon Elastic Compute Cloud (Amazon EC2), che vengono utilizzate per eseguire carichi di lavoro di grandi dimensioni con un notevole risparmio sui costi e accelerare i carichi di lavoro eseguendo attività parallele. Utilizzando le istanze Spot di Amazon EC2, 6sense può fornire la capacità necessaria per supportare la sua espansione futura ottimizzando al contempo i costi. 

6sense ha inoltre notevolmente accelerato la sua velocità di sviluppo migrando verso AWS. Su Apache Mesos, l'azienda era limitata nella sua capacità di creare, testare e implementare nuove pipeline di dati a causa delle limitazioni sulla velocità effettiva dei container. Su Amazon EKS, 6sense può gestire fino al 300% in più di container all'ora. Può anche eseguire lo stesso numero di contenitori Docker su Amazon EKS in circa la metà del tempo impiegato con la soluzione precedente. Raggiungendo questo livello di velocità e scalabilità, 6sense ha migliorato la produttività degli sviluppatori e accelerato la commercializzazione di nuove applicazioni e funzionalità. 

Poiché Amazon EKS è un servizio Kubernetes completamente gestito, 6sense non deve più concentrarsi sulla gestione o sul funzionamento dei suoi cluster Kubernetes. Con questo risparmio di tempo, il team può dedicare tempo al miglioramento dell'esperienza del cliente. "Con AWS, siamo in grado di aumentare la velocità degli sviluppatori, ridurre la burocrazia non necessaria e servire i nostri clienti nel miglior modo possibile", ha affermato Liaw. "Possiamo fornire loro nuove funzionalità, approfondimenti e prodotti il più rapidamente possibile. Più velocemente riusciamo a innovare per servire i nostri clienti, migliore sarà l'esperienza per tutti, incluso il nostro team".

Con la migrazione verso cluster Amazon EKS completamente gestiti, 6sense è in grado di scalare e gestire in modo efficace la propria pipeline di dati, che ha accelerato la sua velocità per fornire informazioni ai propri clienti. L'azienda prevede di migliorare ulteriormente le proprie capacità di scalabilità utilizzando Karpenter, uno scaler automatico per cluster Kubernetes open source costruito insieme ad AWS. 

Su AWS, 6sense ha permesso ai propri dipendenti di concentrarsi sull'innovazione e l'azienda continuerà a utilizzare i servizi AWS per sviluppare nuove soluzioni che generano valore. "In 6sense, siamo in grado di muoverci rapidamente e innovare su AWS senza essere ostacolati", ha dichiarato Liaw.