Publicado en: Oct 28, 2022
Ahora puede monitorear la calidad de las predicciones de machine learning de los trabajos de transformación por lotes en SageMaker con el monitor de modelos de este servicio. El monitor de modelos de Amazon SageMaker ofrece una experiencia completamente administrada para monitorear los modelos en la producción, detectar las desviaciones y adoptar medidas en el momento oportuno, por ejemplo, auditoría o reentrenamiento.
La transformación por lotes de Amazon SageMaker le permite ejecutar predicciones en conjunto de datos almacenadas en Amazon S3. Es ideal para escenarios en los que usted trabaja con grandes conjuntos de datos y no necesita un punto de conexión de inferencia persistente. Una vez que los modelos se implementan en producción, los datos del mundo real pueden desviarse con paso el tiempo con respecto a los datos que se usaron para entrenar el modelo, lo que eventualmente puede conducir a una menor precisión del modelo. Por ejemplo, los cambios en las condiciones macroeconómicas, como las tasas de interés, podrían afectar la calidad del modelo utilizado para predecir los precios de las viviendas. El monitor de modelos puede detectar cambios en la calidad de los datos o del modelo, el sesgo y la atribución de características, y alertarlo para que tome medidas correctivas cuando ocurran dichos cambios.
Con el monitor de modelos de Amazon SageMaker, puede recopilar datos de transformación por lotes en producción, analizarlos y compararlos con sus datos de entrenamiento o validación para detectar desviaciones. Puede utilizar las reglas integradas del monitor de modelos de SageMaker con el fin de detectar desviaciones rápidamente para los conjuntos de datos estructurados, agregar transformaciones de los datos antes de ejecutar las reglas integradas o escribir sus propias reglas personalizadas. Puede usar el monitor de modelos con una amplia gama de tipos de instancias, puede programarlo para que se ejecute a una cadencia regular (por ejemplo, por hora/día) o bajo demanda, enviar métricas de resumen a Amazon CloudWatch y configurar alertas y disparadores para acciones correctivas.
El monitor de modelos de Amazon SageMaker ya está disponible en todas las regiones comerciales donde Amazon SageMaker se encuentre disponible. Para obtener más información, consulte la guía para desarrolladores de Amazon SageMaker y los cuadernos de ejemplo.