Publicado en: Dec 3, 2019
El monitor de modelos de Amazon SageMaker es una nueva capacidad de Amazon SageMaker que monitoriza en forma continua los modelos de aprendizaje automático (machine learning, ML) en la producción, detecta las desviaciones, por ejemplo, la desviación de datos que puede degradar con el tiempo el rendimiento del modelo, y le avisa cuando debe adoptar medidas correctivas.
Con el fin de realizar predicciones, los modelos de aprendizaje automático aprenden patrones existentes en los datos que se utilizaron durante el entrenamiento de los modelos. Luego de la implementación de los modelos en la producción, con el tiempo, los datos en el mundo real comienzan a diferir de los datos que se utilizaron para entrenar el modelo, dando lugar a desviaciones en la calidad del modelo y eventualmente a modelos menos precisos. Por ejemplo, cambiar las condiciones económicas podría provocar que nuevas tasas de interés afectasen las predicciones de compra de viviendas. El monitor de modelos de Amazon SageMaker proporciona una experiencia completamente administrada para monitorizar los modelos en la producción, detectar las desviaciones y adoptar medidas en el momento oportuno, por ejemplo, la auditoría o la actualización de los modelos.
Con el monitor de modelos de Amazon SageMaker, puede reunir fácilmente las solicitudes de predicción y las respuestas de los puntos de enlace, analizar los datos recolectados en la producción y compararlos con sus datos de entrenamiento o validación con el fin de detectar desviaciones. Puede utilizar las reglas integradas del monitor de modelos SageMaker con el fin de detectar desviaciones rápidamente para los conjuntos de datos estructurados, agregar transformaciones de los datos antes de ejecutar las reglas integradas o escribir sus propias reglas personalizadas. Los trabajos de monitorización se pueden programar para que se ejecuten a un ritmo regular, por ejemplo, por hora o por día, impulse la métrica de la síntesis a Amazon CloudWatch con el fin de establecer avisos y desencadenadores para las medidas correctivas y adaptarse a un amplio rango de tipos de instancias compatibles con Amazon SageMaker.
Cuando implementa modelos en Amazon SageMaker y habilita el monitor de modelos con las reglas integradas con la instancia ml.m5.xlarge, obtiene hasta 30 horas de monitorización agregada en todos los puntos de enlace por mes, sin costo.
El monitor de modelos de Amazon SageMaker ya está disponible en todas las regiones comerciales donde Amazon SageMaker se encuentra disponible. Para obtener más información consulte la guía para desarrolladores de Amazon SageMaker.