Kiwify reduce los costos de transcodificación de video en un 70 % gracias a la infraestructura de AWS

Según el ingeniero de DevOps de Kiwify, Fernando Silva, hasta hace poco, este proceso se realizaba en otra plataforma de transmisión. Sin embargo, la empresa se desconectó en dos ocasiones, lo que provocó la caída de los cursos disponibles en la plataforma. “Tenemos alrededor de ocho mil videos en funcionamiento diariamente. Por eso empezamos a explorar cómo solucionar este problema”, explica Fernando Silvia. En aquel momento, la empresa ya era cliente de AWS y se puso en contacto con el proveedor para buscar alternativas.

Tras realizar varias pruebas de concepto, Kiwify decidió desarrollar su propio codificador, que se procesaría en instancias puntuales de Amazon EC2 con CPU Intel. “Pasamos cerca de un mes realizando pruebas antes de tomar esta decisión. Hicimos pruebas con spot y sin spot para comprobar el nivel de rotura y analizamos todos los números”, recuerda.

Aunque el uso de la CPU resolvió inicialmente el problema, el trabajo conjunto de AWS y Kiwify demostró que la migración del procesamiento a instancias aceleradas en la GPU NVIDIA podía aportar aún más rendimiento y una mayor reducción de costos. Al utilizar específicamente las instancias L4 de NVIDIA y trabajar con Amazon Elastic Kubernetes Service (Amazon EKS) y AWS Karpenter , el equipo de Silva pudo aumentar el procesamiento paralelo aprovechando las instancias puntuales de EC2 aceleradas por la GPU, lo que se tradujo en un rendimiento 12 veces más rápido que el obtenido con las instancias EC2 sin aceleración.

Con este resultado, en febrero la empresa decidió agregar a su procesamiento instancias de spot de EC2 aceleradas por GPU, un proyecto respaldado por NVIDIA. En la actualidad, Kiwify utiliza unas 400 instancias de spot de GPU mensuales que, junto con instancias de spot de EC2 sin aceleración, procesan un volumen de videos que puede variar entre 6 y 12 mil por día. Además de sus operaciones de codificación, Kiwify tiene 12 PB de datos pendientes de migración de la antigua plataforma a AWS.

Con la implementación de las instancias de spot de GPU, Kiwify ha registrado una serie de mejoras operativas. En cuanto a los creadores de contenidos, la conversión de videos, que antes podía llevar de 30 minutos a 2 horas, se realiza ahora en un máximo de 20 minutos, lo que reduce drásticamente los tiempos de incorporación de nuevos clientes.

“La infraestructura de AWS también nos aportó estabilidad. Empezamos a usar instancias de spot en diciembre y hasta ahora no hemos tenido ningún tiempo de inactividad”, señala Silva. El ejecutivo también señala que la salida de la red de entrega de contenidos (CDN) ha crecido un 162 % desde enero, sin que hayan aumentado los costos de la empresa. “Nuestros problemas terminaron después de migrar al 100 % a AWS. Para el cliente, lo que importa es que la CDN esté transmitiendo y, hasta ahora, nunca hemos tenido problemas”, afirma.

Silva señala que todos estos beneficios se obtuvieron junto con una reducción de costos del 70 % en comparación con el modelo que adoptaron anteriormente. “Desde enero, nuestra cartera de clientes se ha duplicado y hemos mantenido los costos de codificación de video. Este resultado se obtuvo con el uso de spot, que nos permitió optimizar el procesamiento y los costos”, afirma.