“Antes do projeto de Big Data, o que a gente vendia aos clientes era extremamente simples, com precificação padrão de mercado. Agora nós temos um portfólio bem grande de produtos de informação para oferecer. Foi tudo muito rápido, e nós fizemos mudanças muito significativas”
Denis Dainese
Coordenador de TI da Webmotors
Webmotors oferece aos seus usuários e clientes a oportunidade de usufruir da sua elevada e comprovada audiência, utilizando-se de produtos e serviços altamente eficientes. Com mais de 200 mil ofertas por mês, o portal agora investe em mais uma frente estratégica do negócio com o Big Data, para extrair informações muito valiosas ao setor. Extrair inteligência para ajudar a entender o uso do portal, melhorar a experiência do usuário e ampliar a oferta aos clientes com informações importantes sobre o mercado eram as necessidades cruciais da Webmotors ao buscar as soluções da Amazon Web Services.
Segundo o coordenador de TI da empresa, Denis Dainese, a Webmotors estava com dificuldades para visualizar e analisar as informações que tinha, e a primeira constatação da gestão da equipe foi que era necessário corrigir esse problema: era primordial conseguir extrair e cruzar determinadas informações que as ferramentas usadas até então não permitiam.
“Nós não conseguíamos consolidar informações de audiência para estudar tendências. Nós tínhamos essa informação só numa ponta, e não conseguia cruzar com as nossas bases transacionais. Não podíamos fazer análises dos nossos logs de busca, nem para descobrir qual era a cor de carro mais buscada, ou a palavra-chave mais digitada no nosso campo aberto de busca”.
Com o
Amazon Redshift, a Webmotors reestruturou seu modelo de Big Data. Em pouco mais de dois meses a empresa revisou toda a arquitetura de BI e Analytics, modelando o banco de dados de alta performance na nuvem da AWS.
“Primeiro a gente reestruturou todo o nosso BI com o
Amazon Redshift, e tivemos todo o suporte da AWS para criar nosso banco de dados colunar, para melhorar a performance e resolver outros problemas internos. Na sequência, nós montamos um cluster de Big Data para que a gente tivesse condições de processar esse nível de informação e tirar os insights.”
A Webmotors teve apoio do AWS Proserv para buscar a solução que precisava. Após a análise da situação, segundo Denis, a empresa constatou que precisaria reestruturar todo o sistema para usufruir de todas as vantagens do Amazon Redshift. A empresa então contratou a expertise da ST IT Consulting, para agilizar a implementação do Redshift, em apenas quatro semanas, utilizando a ferramenta 4Insights. A consultoria também implementa melhorias na performance do sistema de ingestão e processamento de informações dentro dos clusters do data mart. Em apenas um dia, são processados cerca de 40GB de dados.
Na nova arquitetura da Webmotors, diversas soluções AWS estão integradas para obter o maior potencial do data warehouse construído com Amazon Redshift. O Amazon DynamoDB faz gestão de catálogo para Amazon Lambda, e gerencia também o controle de status dos triggers e ações. Com o Amazon ElasticSearch, a equipe cria dashboards em tempo real.
O Amazon S3 é usado para o Data Lake, e o Amazon RDS atua como repositório de metadados. O Amazon EMR é usado em toda a fase de processamento de informações, para fazer redução e transformação dos logs de servidores e de produtos de audiência. A extração e movimentação de dados em tempo real adota a solução NiFi, contratada via Marketplace AWS, onde a empresa também estuda contratar o licenciamento do Tableau, para reduzir custos com a solução usada como front-end.
Apesar do pouco tempo de projeto, a Webmotors já consegue extrair muito valor ao negócio com a nova arquitetura de Big Data, e em pouco mais de dois meses consegue criar novos produtos a partir das informações.
“Nós já temos painéis em tempo real sobre o portal, então eu já consigo ver o faturamento em tempo real, olhar toda a parte de match entre clientes e vendedores de veículos. Consigo saber a quantidade de propostas que eu estou gerando naquele período, fazer comparações com o período anterior. Então o projeto de Big Data foi muito rápido e ajudou a obter todos esses indicadores, e a processar essa informação, que para nós é muito valiosa”.
A parceria com a ST IT Consulting para o projeto foi fundamental não só pela expertise da consultoria nas soluções de Big Data disponíveis na nuvem AWS, mas também para reduzir custos e economizar tempo. A empresa continua trabalhando com o portal para modelar novos painéis e configurar o sistema de acordo com as novas necessidades de negócio da empresa.
“Só para se ter uma ideia, agora nós conseguimos criar um fato ou uma dimensão nova em cerca de quatro horas. Eu não perco mais tempo reescrevendo código de ETL. A diferença é entre o CAPEX E OPEX, basicamente. Eu já começo com a mão de obra qualificada, não preciso gastar tempo em processo de contratação, e consigo ativar esse contrato internamente como um investimento, não como uma despesa”.
O projeto continua evoluindo internamente, com o uso de produtos analíticos ainda mais avançados, e machine learning. A Webmotors está desenvolvendo seu LiveMarket, um novo módulo com informações mais precisas para os clientes: portfólio de carros, melhores cotações, melhor valor de venda para o carro, e vai monetizar as análises de informações que antes da solução de Big Data eram trabalhosas ou mesmo inviáveis. “Nosso cliente agora vai saber com mais precisão qual a melhor forma dele comprar ou qual a melhor forma dele vender”, explica Denis Dainese.
