Veröffentlicht am: Oct 28, 2022
Sie können jetzt die Qualität von Machine-Learning-Vorhersagen aus Batch Transform-Aufträgen in SageMaker mit Amazon SageMaker Model Monitor überwachen. Amazon SageMaker Model Monitor bietet eine vollständig verwaltete Erfahrung, um Modelle in der Produktion zu überwachen, Abweichungen zu erkennen und rechtzeitige Maßnahmen wie Prüfung oder Umschulung zu ergreifen.
Amazon SageMaker Batch Transform ermöglicht es Ihnen, Prognosen für Datensätze auszuführen, die in Amazon S3 gespeichert sind. Es ist ideal für Szenarien, in denen Sie mit großen Datensätzen arbeiten und keinen dauerhaften Inferenzendpunkt benötigen. Nachdem die Modelle in der Produktion eingesetzt werden, können die Daten in der realen Welt im Laufe der Zeit von den Daten abweichen, die zum Trainieren des Modells verwendet wurden, was schließlich zu einer geringeren Modellgenauigkeit führen kann. So könnten sich beispielsweise Änderungen der makroökonomischen Bedingungen, wie z. B. der Zinssätze, auf die Qualität des zur Vorhersage der Immobilienpreise verwendeten Modells auswirken. Model Monitor kann Abweichungen bei der Datenqualität, der Modellqualität, der Verzerrung und der Merkmalszuordnung erkennen und Sie warnen, damit Sie bei solchen Änderungen Abhilfemaßnahmen ergreifen können.
Mit Amazon SageMaker Model Monitor können Sie Batch-Transform-Daten in der Produktion sammeln, sie analysieren und mit Ihren Trainings- oder Validierungsdaten vergleichen, um Abweichungen zu erkennen. Sie können die integrierten Regeln von SageMaker Model Monitor verwenden, um Drifts für strukturierte Datensätze sofort zu erkennen, Datentransformationen hinzuzufügen, bevor Sie die integrierten Regeln ausführen, oder eigene benutzerdefinierte Regeln schreiben. Sie können Model Monitor mit einer breiten Palette von Instance-Typen verwenden, die Ausführung in einem regelmäßigen Rhythmus (z. B. stündlich/täglich) oder nach Bedarf planen, zusammenfassende Metriken an Amazon CloudWatch senden und Warnmeldungen und Auslöser für Korrekturmaßnahmen festlegen.
Amazon SageMaker Model Monitor für Batch Transform-Aufträge ist in allen kommerziellen Regionen verfügbar, in denen Amazon SageMaker verfügbar ist. Weitere Informationen finden Sie im Amazon Sagemaker Entwickler-Handbuch und in den Beispiel-Notebooks.