AWS DevOps Agent

„Als AWS den DevOps Agent einführte, hat T-Mobile vom ersten Tag an mit am Tisch gesessen. Als Designpartner haben wir gesehen, wie AWS DevOps Agent die Ursachenanalyse in Produktionsumgebungen erheblich verbessern kann. Unser Feedback aus der Praxis hat direkt die Entwicklung des Produkts beeinflusst. 

Unsere Infrastruktur umfasst mehrere Clouds und lokale Umgebungen, wobei die Anwendungsprotokolle in unserer lokalen Splunk-Bereitstellung zentralisiert sind. Die Fähigkeit von AWS DevOps Agent, sich nahtlos in Splunk zu integrieren und Protokolle in diesen unterschiedlichen Umgebungen zu analysieren, hat sich bei der weiteren Erprobung der Lösung als sehr positiv erwiesen.“

Aravind Manchireddy, SVP, Technology Operations, T-Mobile

Die Western Governor's University (WGU), eine führende Online-Universität mit über 191 000 Studenten, gehörte zu den ersten Organisationen, die Amazon DevOps Agent in der Produktion einführten, und zwar noch vor dem Start der Vorversion auf re:Invent. Als großer Dynatrace-Anwender nutzt WGU die native Dynatrace-Integration des DevOps Agents, sodass Dynatrace Intelligence Problemdatensätze zur Untersuchung automatisch an den Kundendienstmitarbeiter weiterleiten und angereicherte Ergebnisse direkt an Dynatrace zurücksenden kann.

Bei einer kürzlich durchgeführten Produktionsuntersuchung analysierte das SRE-Team von WGU den DevOps Agent, um ein Szenario einer Serviceunterbrechung zu analysieren. Dadurch wurde die Gesamtlösungszeit von geschätzten zwei Stunden auf nur 28 Minuten reduziert – eine Verbesserung der MTTR um 77 %. Der Kundendienstmitarbeiter lokalisierte schnell die Ursache in der Konfiguration einer Lambda-Funktion und brachte wichtige betriebliche Erkenntnisse zum Vorschein, die zuvor nur in unentdeckter interner Dokumentation vorhanden waren.

„Er war in der Lage, den schlagenden Beweis zu liefern und stellte fest, dass das Lambda die Ursache war. Die Untersuchung hatte fast makellose Kennzahlen, die mit denen übereinstimmten, die wir im Frontend gesehen haben.“ Er fügte hinzu: „Gestern war ein großer Sieg. Wenn wir die Entdeckung weiter beschleunigen können, kann ich nicht beschreiben, wie groß der Sieg für unser Unternehmen wäre.“ Mit Plänen, das Feature DevOps Agent Skills zu nutzen, ist die WGU auf dem besten Weg, die Untersuchungszeit noch weiter zu verkürzen.

Angel Marchena, Director of Technical Operations, Western Governors University

Zenchef ist eine Technologieplattform für Restaurants, mit der Restaurants Reservierungen, Tischoperationen, digitale Menüs, Zahlungen und Gästemarketing über ein einziges, provisionsfreies System verwalten können. Mit einem fokussierten DevOps-Team, das mehrere Produktionsumgebungen in mehreren Geschäftsbereichen verwaltete, standen sie vor einer echten Prüfung, als während eines Unternehmens-Hackathons ein API-Integrationsproblem auftauchte, das einen Downstream-Partner betraf. Techniker waren an der Veranstaltung beteiligt und nichts Signifikantes zeigte sich in der Überwachung, das sie in die richtige Richtung wies.

Anstatt die Entwickler vom Hackathon abzuhalten, brachte das Team das Problem zu DevOps Agent. Das Problem wurde systematisch gelöst, wobei die Authentifizierung als beitragender Faktor ausgeschlossen wurde, der Schwerpunkt der Untersuchung auf ECS-Bereitstellungen verlagert wurde und die Ursache letztendlich auf eine Code-Regression zurückgeführt wurde, bei der eine neue Version einen unbekannten Aufzählungswert in der Datenbank nicht verarbeiten konnte. Die vollständige Untersuchung dauerte 20 bis 30 Minuten, was einer Verkürzung von etwa 75 % gegenüber den 1–2 Stunden entspricht, die sie manuell in Anspruch genommen hätte. Die Ergebnisse wurden direkt mit dem zuständigen Ingenieur geteilt.

„Während des Hackathons hatten wir fast keine verfügbare Bandbreite, um das zu untersuchen – und wir brauchten sie auch nicht. Wir versuchen immer, ein paar Schritte voraus zu sein, und diese Art der proaktiven Untersuchung ist sonst einfach nicht immer möglich. DevOps Agent ermöglicht neue Möglichkeiten, das Verhalten unserer Plattformen zu verstehen.“

Theo Massard, Platform Engineering Manager, Zenchef