LG AI Research desarrolla un modelo básico con Amazon SageMaker

El conglomerado surcoreano LG Group recopila grandes cantidades de datos de sus empresas, que incluyen electrodomésticos, telecomunicaciones, baterías y productos farmacéuticos. Un pilar clave de la transformación digital del grupo es el desarrollo de la tecnología de IA y la integración de esta en sus productos y servicios. El grupo creó LG AI Research para aprovechar el poder de la IA en su estrategia de transformación digital, desarrollar mejores experiencias para los clientes y resolver los desafíos comunes de la industria.

Cuando LG AI Research decidió desarrollar su modelo básico de última generación, que se inspira en el funcionamiento del cerebro humano y tiene una capacidad avanzada para aprender y emitir juicios, buscó la plataforma de machine learning (ML) más eficiente para gestionar grandes cantidades de datos y realizar capacitaciones e inferencias a gran escala. El modelo base necesitaba entrenarse con docenas de terabytes de datos para hacer deducciones similares a las humanas y comprender textos e imágenes. Además, el proyecto requería una infraestructura informática de alto rendimiento y la flexibilidad necesaria para aumentar la cantidad de parámetros a miles de millones durante el entrenamiento.

La automatización del flujo de trabajo también era importante, ya que era necesario completar varios modelos o tareas posteriores simultáneamente. Para cumplir con estos requisitos, el instituto estudió una infraestructura local, pero los costos eran demasiado altos y se hubiesen necesitado 20 empleados para configurar y mantener el hardware local. También hubiese sido necesario actualizar las GPU todos los años y añadir más GPU para dar soporte a los picos de carga de trabajo. Después de estudiar todos los desafíos de una solución local, LG AI Research decidió que Amazon SageMaker era la mejor opción para este proyecto.

LG AI Research implementó con éxito su modelo base, EXAONE, en producción en un año. EXAONE, que significa «IA experta para todos», es un modelo multimodal de 300 000 millones de parámetros que utiliza imágenes y datos de texto.

LG AI Research utilizó Amazon SageMaker para entrenar su modelo básico a gran escala y Amazon FSx para Lustre para distribuir los datos en instancias a fin de acelerar el entrenamiento del modelo. Como se basa en AWS, LG AI Research pudo resolver problemas, implementar puntos de control, ajustar e implementar correctamente el modelo en producción.

Gwang mo Song, de LG AI Research, explica: «Al utilizar la infraestructura de entrenamiento distribuida de alto rendimiento de Amazon SageMaker, los investigadores pueden centrarse únicamente en el entrenamiento de modelos en lugar de en administrar la infraestructura. Además, al aprovechar la biblioteca de datos paralelos de Amazon SageMaker, pudimos obtener resultados de entrenamiento rápidamente a medida que aumentaba la cantidad de GPU y los parámetros del modelo».

LG AI Research redujo los costos en aproximadamente un 35 % al eliminar la necesidad de un equipo de administración de infraestructura independiente. También aumentó la velocidad de procesamiento de datos en aproximadamente un 60 % mediante la biblioteca paralela de datos distribuidos de Amazon SageMaker.

Con EXAONE, LG AI Research desarrolló una artista virtual de IA llamada Tilda. El poder fundamental de las cualidades artísticas de Tilda proviene de EXAONE, que se entrenó con 600.000 millones de obras de arte y 250 millones de imágenes de alta resolución acompañadas de texto. La artista virtual creó 3000 imágenes y patrones para la diseñadora de moda Yoon hee Park, quien diseñó más de 200 atuendos para la Semana de la Moda de Nueva York de 2022 con las imágenes y los patrones de Tilda.

El trabajo de Park con LG AI Research demostró el potencial de expandir la tecnología de IA a la industria del arte, hacer crecer el ecosistema de la IA y fomentar la colaboración intersectorial. La compañía anunció recientemente una asociación con la Escuela de Diseño Parsons de la ciudad de Nueva York para llevar a cabo una investigación conjunta sobre tecnologías de IA avanzadas que puedan aprovecharse en la industria de la moda.

Con Tilda, EXAONE ha demostrado cómo se pueden utilizar los modelos básicos para transformar una amplia gama de sectores, desde la fabricación y la investigación hasta la educación y las finanzas. LG AI Research continúa su trabajo para hacer que la vida humana sea más valiosa con su modelo base y espera colaborar estrechamente con AWS en proyectos futuros.