Veröffentlicht am: Dec 3, 2019
Amazon SageMaker Model Monitor ist eine neue Funktion von Amazon SageMaker, die Machine Learning (ML)-Modelle in der Produktion kontinuierlich überwacht, Abweichungen wie Datenverschiebungen erkennt, die die Modellleistung im Laufe der Zeit beeinträchtigen können, und Sie warnt, Abhilfemaßnahmen zu ergreifen.
ML-Modelle treffen Vorhersagen durch das Lernen von Mustern aus Daten, die während der Schulung der Modelle verwendet wurden. Nachdem Modelle in der Produktion bereitgestellt wurden, beginnen sich die Daten in der realen Welt von den Daten zu unterscheiden, die zum Schulen des Modells verwendet wurden, was zu Abweichungen in der Modellqualität und schließlich zu weniger genauen Modellen führt. Beispielsweise könnten sich ändernde wirtschaftliche Bedingungen zu neuen Zinssätzen führen, die sich auf die Prognosen für den Hauskauf auswirken. Amazon SageMaker Model Monitor bietet eine vollständig verwaltete Erfahrung, um Modelle in der Produktion zu überwachen, Abweichungen zu erkennen und rechtzeitige Maßnahmen wie Prüfung oder Umschulung von Modellen zu ergreifen.
Mit Amazon SageMaker Model Monitor können Sie auf einfache Weise Vorhersageanforderungen und -antworten von Ihren Endpunkten erfassen, die in der Produktion gesammelten Daten analysieren und mit Ihren Schulungs- oder Validierungsdaten vergleichen, um Abweichungen zu erkennen. Sie können die integrierten Regeln von SageMaker Model Monitor verwenden, um Drifts für strukturierte Datensätze sofort zu erkennen, Datentransformationen hinzuzufügen, bevor Sie die integrierten Regeln ausführen, oder eigene benutzerdefinierte Regeln schreiben. Überwachungsaufträge können so geplant werden, dass sie mit einer regulären Trittfrequenz ausgeführt werden, z. B. stündlich oder täglich, um Zusammenfassungsmetriken an Amazon CloudWatch zu übertragen, damit Sie Warnungen und Trigger für Korrekturmaßnahmen festlegen und eine breite Palette von Instance-Typen unterstützen können, die in Amazon SageMaker unterstützt werden.
Wenn Sie Modelle in Amazon SageMaker bereitstellen und Model Monitor mit integrierten Regeln und ml.m5.xlarge-Instance aktivieren, erhalten Sie jeden Monat kostenlos bis zu 30 Stunden Überwachung über alle Endpunkte hinweg.
Amazon SageMaker Model Monitor ist jetzt in allen kommerziellen Regionen verfügbar, in denen Amazon SageMaker verfügbar ist. Weitere Informationen finden Sie im Amazon Sagemaker Entwickler-Handbuch.