Veröffentlicht am: Dec 1, 2021
Amazon SageMaker bietet jetzt Verbesserungen für die Herkunftsnachverfolgungsfunktion für Machine Learning (ML), die es Kunden ermöglicht, die Herkunft von Artefakten wie Daten, Funktionen und Modellen in einem ML-Workflow nachzuverfolgen und abzufragen. Jetzt können Kunden das End-to-End-Herkunftsdiagramm abrufen, das den gesamten Workflow von der Datenvorbereitung bis zur Modellbereitstellung über eine einzige Abfrage umfasst. Diese Funktion vermeidet undifferenziertes schweres Heben, das erforderlich ist, um Herkunftsinformationen einen Workflow-Schritt nach dem anderen abzurufen und sie alle manuell zusammenzufügen. Kunden können auch Herkunftsinformationen für Segmente des Workflows abrufen, indem sie einen Schritt als zentralen Punkt definieren und die Herkunft der Schritte abfragen, die diesem Punkt vor- oder nachgelagert sind. Kunden können beispielsweise ein Modell als zentrale Entität definieren und die Position des Rohdatensatzes abrufen, aus dem Funktionen extrahiert wurden, um dieses Modell zu trainieren.
Die neue Funktion ermöglicht auch die Nachverfolgung von Herkunftsinformationen von Workflow-Schritten, die sich über mehrere AWS-Konten erstrecken. Das Erstellen mehrerer Konten für verschiedene Personen (Datenwissenschaftler, ML-Ingenieure usw.), um alle Ressourcen Ihres Unternehmens zu organisieren, ist eine gängige DevOps-Praxis. Um diese Funktion zu aktivieren, kann der Kunde Herkunftsressourcen über AWS-Konten mithilfe von AWS RAM freigeben. AWS RAM hilft, den Betriebsaufwand zu reduzieren und bietet Transparenz über gemeinsam genutzte Ressourcen. Nach der Konfiguration können Kunden die Herkunftsabfrage-API verwenden, um Beziehungen zwischen verschiedenen Artefakten nachzuverfolgen, die sich über mehrere AWS-Konten erstrecken.
Die ML-Herkunftsinformationen können verwendet werden, um die Modell-Governance zu verbessern, frühere Versionen der Artefakte zu reproduzieren oder Workflows effizienter zu beheben. Trainieren Sie zunächst ein neues ML-Modell mit SageMaker Studio oder SDK und verwenden Sie Herkunftsabfrage-APIs, um Herkunftsinformationen nachzuverfolgen. Weitere Informationen finden Sie auf unserer Dokumentationsseite zur kontoübergreifenden grafikbasierten Herkunftsnachverfolgung und zur Herkunftsabfrage-API.