Nykaa cria uma plataforma de dados unificada para geração de insights usando a AWS

Na última década, à medida que a Nykaa evoluiu de uma plataforma de comércio eletrônico exclusiva de beleza e cuidados pessoais para abranger vários setores, incluindo higiene para homens, moda, eB2B e expansão de sua presença internacional, surgiram desafios de dados. Cada setor vertical operava com bancos de dados distintos e separados, o que impedia a empresa de acessar uma única fonte de dados sobre vendas, clientes e estoque de produtos.

Os sistemas em silos da Nykaa impediam a empresa de realizar data analytics eficazes e gerar insights comerciais sobre seus clientes. Além disso, os vários bancos de dados distintos da Nykaa resultavam em um gerenciamento demorado e aumentavam o risco de dados contraditórios. A empresa também descobriu que duplicar os mesmos dados em vários locais aumentava seu espaço de armazenamento geral e resultava em uma utilização ineficiente dos recursos.

Além disso, para monitorar a performance, a Nykaa precisava regularmente coletar e analisar dados de cliques e transações em vários setores. Isso resultava na fragmentação dos dados em diferentes bancos de dados. A empresa precisava de uma equipe de dois a quatro funcionários por até três a quatro semanas para gerar os relatórios comerciais relevantes. Devido ao processo demorado, a Nykaa às vezes perdia oportunidades de alcançar grupos específicos de clientes em ocasiões específicas.

Em 2022, a Nykaa lançou a iniciativa “One Nykaa, One Data” para criar um framework unificado de ingestão, governança e consulta de dados. A empresa recorreu à AWS para otimizar suas operações em um único data lake escalável, confiável e econômico. O objetivo era consolidar dados de diversas fontes, aumentar a transparência para todas as partes interessadas, obter insights comerciais superiores e gerar oportunidades de vendas cruzadas e vendas adicionais.

Em setembro de 2022, a Nykaa criou uma prova de conceito (POC) comparando a eficiência de custos do Amazon EMR, uma solução de big data baseada em nuvem para processamento, analytics e machine learning usando o framework de código aberto, com outras soluções de análise baseadas em nuvem. Após três ou quatro semanas, a Nykaa observou uma redução de 30% em suas despesas com software essencial, graças aos recursos de escalabilidade elástica e ao modelo de preço conforme o uso do Amazon EMR.

Em março de 2023, a Nykaa começou a usar o Amazon EMR, o Amazon Simple Storage Solution (Amazon S3), um serviço de armazenamento de objetos, e o data warehouse em nuvem Amazon RedShift para construir e realizar a implantação da camada de ingestão do data lake. Como pilar da iniciativa “One Nykaa, One Data”, o data lake agora pode consolidar mais de 400 terabytes de dados não arquivados de várias fontes em um único data lake.

Com o ajuste de escala automático integrado ao Amazon EMR, a empresa agora pode escalar automaticamente suas workloads de processamento de dados, facilitando até 10.000 trabalhos de ingestão de dados. Como consequência, para gerar um novo relatório de negócios, a equipe de analytics da Nykaa precisa de apenas 5 horas, o que antes levava até 2 semanas. Hoje, a equipe escalou a plataforma de processamento de dados para gerar mais de 1.500 conjuntos de dados de clientes. Ela também coleta dados de hora em hora, em vez de diariamente, permitindo que a Nykaa responda rapidamente às tendências do mercado e às preferências emergentes dos clientes.

A Nykaa utiliza o AWS Lake Formation para construir, gerenciar e proteger o novo data lake na camada de governança. Com uma maneira segura de obter insights mais profundos sobre o comportamento e as preferências dos clientes, a Nykaa pode criar estratégias de marketing personalizadas e recomendações de produtos sob medida para diferentes segmentos de clientes.

Por fim, a Nykaa utiliza o Amazon Redshift e o Amazon Athena, um serviço de analytics sem servidor, para analisar dados na escala de petabytes na camada de consultas. Como ambos os serviços são totalmente gerenciados, os desenvolvedores da Nykaa não precisam gastar tempo operando e mantendo os serviços de data warehouse e consulta.

A empresa pretende incorporar mais fontes de dados no futuro, incluindo feeds em tempo real, para gerar insights ainda mais direcionados e criar experiências personalizadas para os clientes.

Com o data lake consolidado, a visão da Nykaa se estende à integração de recursos de machine learning. Com isso, a empresa pode reforçar suas funcionalidades de pesquisa e recomendação, otimizar o gerenciamento de estoque e melhorar as operações de backend, tudo para elevar a experiência do cliente.

"No mercado de comércio eletrônico cada vez mais concorrido da Índia, a menor vantagem competitiva faz uma diferença significativa. Com base na AWS, agora temos um data lake altamente escalável e econômico, que é seguro e fácil de gerenciar. Isso nos ajudou a descobrir insights profundos sobre os clientes que antes estavam fora do nosso alcance", afirma Rajat Kumar, diretor da plataforma de dados da Nykaa.