Amazon SageMaker AI ahora admite imágenes indexadas mediante SOCI para iniciar los trabajos de entrenamiento en segundos
Hoy, Amazon SageMaker AI anuncia la compatibilidad con imágenes de contenedor indexadas mediante Seekable OCI (SOCI) para los trabajos de entrenamiento y procesamiento, de modo que sus trabajos comiencen a ejecutar el código antes. Las imágenes indexadas mediante SOCI inician los contenedores de entrenamiento de Amazon SageMaker AI en segundos. Esto reduce el tiempo de inactividad de la GPU durante la extracción de imágenes en hasta un 90 %, sin afectar el rendimiento del entrenamiento. Antes de que se pueda ejecutar un trabajo de entrenamiento o procesamiento, SageMaker AI descarga su imagen de contenedor en la instancia. En el caso de las imágenes de aprendizaje profundo, que habitualmente superan los 10 GB, esa descarga suma minutos al inicio de cada trabajo, y se paga por ese tiempo. Ahora, cuando la imagen incluye un índice SOCI, SageMaker AI carga la imagen de forma diferida, se obtienen solo los archivos necesarios para iniciar el contenedor y se transmite el resto en segundo plano a medida que se ejecuta el código.
Para utilizar esta característica, haga referencia a una imagen indexada mediante SOCI desde un repositorio privado de Amazon ECR en su trabajo de entrenamiento o procesamiento. Puede utilizar un contenedor de aprendizaje profundo de AWS preindexado cambiando la etiqueta de la imagen por su variante -soci, o agregar un índice SOCI a su propia imagen en Amazon ECR con herramientas de código abierto, sin necesidad de volver a crear la imagen. No es necesario realizar cambios en la definición del trabajo, el punto de entrada o los canales de datos. SageMaker AI comprueba automáticamente si hay un índice y las imágenes sin índice se descargan como antes. Si no se puede usar un índice, el trabajo vuelve a la descarga estándar y continúa ejecutándose.
Las imágenes indexadas mediante SOCI para los trabajos de entrenamiento y procesamiento de SageMaker AI están disponibles hoy en todas las regiones de AWS en las que está disponible SageMaker AI, a través de las API, las CLI, los SDK y la consola de SageMaker AI. Para obtener más información, consulte la documentación sobre los trabajos de entrenamiento y de procesamiento, o lea el blog de lanzamiento.