ML Governance with Amazon SageMaker

简化 ML 活动的权限

SageMaker Role Manager 通过预构建的 AWS Identity and Access Management (IAM) 策略目录为 ML 活动和角色提供一组基线权限。ML 活动可以包括数据准备和训练，角色可以包括 ML 工程师和数据科学家。您可以保留基线权限，或根据您的特定需求进一步自定义它们。

自动生成 IAM policy

通过一些自助提示，您可以快速输入常见的治理构造，例如网络访问边界和加密密钥。然后，SageMaker Role Manager 将自动生成 IAM policy。您可以通过 AWS IAM 控制台发现生成的角色和关联的策略。

附加您的托管策略

要进一步针对您的用例定制权限，请将您的托管 IAM 策略附加到您使用 SageMaker Role Manager 创建的 IAM 角色。您还可以添加标签以帮助跨 AWS 服务识别和组织角色。

获取模型信息

SageMaker 模型卡是 Amazon SageMaker 控制台中的模型信息存储库，帮助您集中和标准化模型文档，以便您能够可靠地实施 ML。您可以自动填充训练细节，如输入数据集、训练环境和训练结果，以加速文件编制过程。您还可以添加详细信息，例如模型目的和性能目标。

可视化评估结果

您可以在您的模型卡上附加模型评估结果，如偏差和质量指标，并添加可视化效果，如图表，以获得对模型性能的关键见解。

分享模型卡

您可以将模型卡导出为 PDF 格式，以便更轻松地与业务涉众、内部团队或客户共享。

跟踪模型行为

SageMaker Model Dashboard 为您提供已部署模型和端点的全面概览，以便您可以在同一位置跟踪资源和模型行为违规。你可以从四个方面监测模型行为：数据质量、模型质量、偏差漂移和特征归因漂移。SageMaker Model Dashboard 通过与 Amazon SageMaker Model Monitor 和 Amazon SageMaker Clarify 的集成来监控行为。

自动提醒

SageMaker Model Dashboard 提供一种集成体验，可以针对缺失和无效的模型监控作业以及模型行为偏差设置和接收警报。

排查模型偏差的故障

您可以进一步检查各个模型并分析随时间推移影响模型性能的因素。然后，您可以跟进 ML 从业者以采取纠正措施。