6sense Insights Inc. Verbessert die Skalierbarkeit und beschleunigt die Markteinführung durch die Migration zu Amazon EKS

6sense mit Hauptsitz in San Francisco, Kalifornien, liefert Datenanalysen, Verkaufserkenntnisse und andere Vorhersagen, damit Business-to-Business-Umsatzteams ihre Käufer und Kunden besser verstehen können. Im Jahr 2014 begann das Unternehmen, Apache Mesos, eine Open-Source-Lösung zur Verwaltung von Rechen-Clustern zur Orchestrierung seiner Daten-Pipeline-Frameworks zu verwenden. „Als wir wuchsen, stießen wir bei Apache Mesos auf mehrere Einschränkungen“, sagt George Liaw, Direktor für Infrastrukturtechnik bei 6sense. „Wir konnten jeweils nur einem Framework Rechenressourcen anbieten, was unsere Prozesse verlangsamte. Wir hatten auch Skalierungsprobleme.“ 

Auf der Suche nach einer skalierbareren Lösung begann 6sense, Kubernetes, ein Open-Source-Container-Orchestrierungssystem, zu untersuchen, um seine Datenpipelines zu verbessern. Im Jahr 2018 migrierte das Unternehmen seine Anwendungs- und API-Services auf zwei Kubernetes-Cluster und begann, kOps zu verwenden, eine Reihe von Tools für die Installation, den Betrieb und das Löschen von Kubernetes-Clustern in der Cloud. Obwohl eine containerisierte Architektur die Agilität von 6sense verbesserte, wurde kOps nicht vollständig verwaltet, sodass das 6sense-Team erhebliche tägliche Betriebs- und Verwaltungsaufgaben erledigen musste. „Mit kOps hatten wir einen viel zu hohen Wartungsaufwand“, sagt Liaw. „Wir haben erkannt, dass unser Team seine Zeit darauf konzentrieren könnte, den Kunden zu betreuen, anstatt Kubernetes zu verwalten, wenn wir diese manuellen Aufgaben reduzieren könnten.“

Im Jahr 2019 entschied sich 6sense, in AWS Enterprise Support zu investieren, das einen Concierge-Service anbietet, um Unternehmen dabei zu unterstützen, Ergebnisse zu erzielen und in der Cloud erfolgreich zu sein. Das AWS-Enterprise-Support-Team half dem Unternehmen, zu erkennen, dass es die Probleme lösen könnte, mit denen es konfrontiert war, indem es zu Amazon EKS migriert, das vollständig verwaltet wird. „Für 6sense war Amazon EKS fast ein direkter Ersatz, der auf magische Weise besser funktionierte“, sagt Liaw.

Im September 2021 begann 6sense mit der Migration seiner verbleibenden Workloads von Legacy-Lösungen, die auf Apache Mesos und kOps laufen, zu Amazon EKS. Das Unternehmen migrierte den Großteil seiner Anwendungs- und API-Service-Workloads innerhalb der ersten Woche zu Amazon EKS und entwickelte bis Ende 2021 eine stabile und benutzerfreundliche Pipeline-Orchestrierungslösung. „Als wir mit dem Betrieb von Amazon EKS-Clustern begonnen hatten, haben wir wertvolle Funktionen freigeschaltet“, sagt Liaw. „Wir könnten Cluster mit flexibleren Konfigurationen testen, ohne uns Gedanken über ihre Stabilität machen zu müssen.“ Im Dezember 2021 betrieb das Unternehmen 7-8 Cluster auf Amazon EKS und hatte 80 Prozent der Migration abgeschlossen. 

Mithilfe von Amazon EKS konnte 6sense den Workload-Durchsatz um 400 Prozent verbessern, sodass das Unternehmen 1-2 TB Daten pro Tag verarbeiten kann, Tendenz steigend. Mit dieser Geschwindigkeit kann 6sense hochkomplexe Workloads unterstützen und seinen Kunden 65 Prozent schneller wertvolle Erkenntnisse liefern. 

Die AWS-gestützte Lösung von 6sense ist nicht nur extrem schnell, sondern auch hochgradig skalierbar. „Wir können einen Cluster auf Amazon EKS fast unendlich skalieren, um so viele Dinge wie möglich parallel auszuführen“, sagt Premal Shah, Senior Vice President of Engineering and Infrastructure bei 6sense. „Wir müssen uns keine Gedanken mehr darüber machen, wie viel wir pro Stunde ausführen können.“ Das Unternehmen setzt auch auf Amazon Elastic Compute Cloud (Amazon EC2) Spot-Instances, die verwendet werden, um große Workloads zu erheblichen Kosteneinsparungen auszuführen und Workloads durch parallele Aufgaben zu beschleunigen. Durch den Einsatz von Amazon-EC2-Spot-Instances kann 6sense die Kapazität bereitstellen, die es für seine zukünftige Expansion benötigt, und gleichzeitig die Kosten optimieren. 

6sense hat durch die Migration zu AWS auch seine Entwicklungsgeschwindigkeiten erheblich beschleunigt. Bei Apache Mesos war das Unternehmen aufgrund des begrenzten Container-Durchsatzes nur eingeschränkt in der Lage, neue Datenpipelines zu erstellen, zu testen und bereitzustellen. Auf Amazon EKS kann 6sense bis zu 300 Prozent mehr Container pro Stunde ausführen. Es kann auch die gleiche Anzahl von Docker-Containern auf Amazon EKS in etwa 50 Prozent der Zeit ausführen, die es mit seiner vorherigen Lösung benötigt hat. Durch das Erreichen dieses Niveaus an Geschwindigkeit und Skalierbarkeit hat 6sense die Produktivität der Entwickler verbessert und die Markteinführung neuer Anwendungen und Funktionen beschleunigt. 

Da Amazon EKS ein vollständig verwalteter Kubernetes-Service ist, muss sich 6sense nicht mehr auf die Verwaltung oder den Betrieb seiner Kubernetes-Cluster konzentrieren. Mithilfe dieser Zeitersparnis kann das Team Zeit für die Verbesserung des Kundenerlebnisses aufwenden. „Mit AWS sind wir in der Lage, die Geschwindigkeit der Entwickler zu erhöhen, unnötigen bürokratischen Aufwand zu reduzieren und unsere Kunden so gut wie möglich zu bedienen“, sagt Liaw. „Wir können ihnen so schnell wie möglich neue Funktionen, Erkenntnisse und Produkte zur Verfügung stellen. Je schneller wir Innovationen entwickeln können, um unsere Kunden zu bedienen, desto besser ist das Erlebnis für alle – auch für unser Team.“

Durch die Migration auf vollständig verwaltete Amazon EKS-Cluster kann 6sense seine Datenpipeline effektiv skalieren und verwalten, was die Geschwindigkeit beschleunigt hat, um seinen Kunden Erkenntnisse zu liefern. Das Unternehmen plant, seine Skalierungsmöglichkeiten mithilfe von Karpenter, einem automatischen Open-Source-Skalierer für Kubernetes-Cluster, der zusammen mit AWS entwickelt wurde, weiter zu verbessern. 

Bei AWS gab 6sense seinen Mitarbeitern die Möglichkeit, sich auf Innovationen zu konzentrieren, und das Unternehmen wird weiterhin AWS-Services nutzen, um neue, wertschöpfende Lösungen zu entwickeln. „Bei 6sense sind wir in der Lage, schnell zu handeln und Innovationen auf AWS zu entwickeln, ohne gebremst zu werden“, sagt Liaw.