Magellan Rx reduz o tempo de ETL em mais de 70% usando o Amazon Redshift

A Magellan Rx Management (Magellan Rx), uma divisão da Magellan Health Inc., é uma organização farmacêutica de próxima geração que oferece soluções significativas para as pessoas às quais ela atende. Os clientes da Magellan Rx incluem planos de saúde, empregadores, administradores terceirizados, grupos sindicais e agências governamentais. Para atender às crescentes necessidades de dados e cumprir seus contratos de nível de serviço, a organização precisava migrar de seu data warehouse on-premises para uma solução de hospedagem de dados de alta performance. 

Em 2020, a Magellan Rx migrou para a Amazon Web Services (AWS). A organização agora hospeda seus dados usando o Amazon Redshift, um serviço de armazenamento de dados em escala de petabytes totalmente gerenciado na nuvem que permite que os usuários consultem e combinem exabytes de dados estruturados e semiestruturados em data warehouses, bancos de dados operacionais e data lakes usando a linguagem de consulta estruturada padrão (SQL). Usando o serviço da AWS, o Magellan Rx reduziu custos operacionais, diminuiu os tempos de extração, transformação e envio (ETL) e escalou as operações.

A Magellan Rx optou por migrar para a AWS com base na compatibilidade perfeita dos serviços da AWS e de outras ferramentas baseadas na nuvem. A arquitetura baseada na nuvem também proporcionou à Magellan Rx economias significativas em taxas de licenciamento e suporte, ajudou na expansão da organização para continuar a atender e superar a demanda e criou um ambiente de dados mais resiliente. Além disso, como a Magellan Rx foi uma das primeiras a adotar a nuvem, sua equipe de engenheiros de dados não precisou de treinamento extensivo para executar a migração. A Magellan Rx iniciou sua migração para a AWS em janeiro de 2020 e entrou em operação em dezembro. 

Na AWS, a Magellan Rx pode manter o nível de serviço que seus clientes esperam. A solução usa arquitetura de vários locatários e é totalmente configurável, permitindo que a Magellan Rx integre novos dados de clientes em menos de uma hora. O Amazon Simple Storage Service (Amazon S3), um serviço de armazenamento de objetos que oferece escalabilidade, disponibilidade de dados, segurança e performance líderes do setor, abriga os dados colocados no seu armazém do Amazon Redshift. A Magellan Rx pode preservar, recuperar e restaurar todas as versões de cada objeto armazenado em seus buckets do Amazon S3, cumprindo seus requisitos de recuperação de desastres. “Construímos uma base de computação moderna”, diz Vinesh Kolpe, vice-presidente de tecnologia da informação da Magellan Rx. “Não só estamos excedendo nossos contratos de nível de serviço, como também estamos escalando sem os comprometer.”

Usando os serviços da AWS, a Magellan Rx criou uma solução de dados centralizada e reduziu o custo total de propriedade de seus ambientes de banco de dados em 30%. O acesso a dados quase em tempo real de sistemas transacionais na nuvem criou a base de que a organização precisava para uma descoberta de dados mais rápida e análises avançadas. O Magellan Rx pode armazenar seus dados em um único local no Amazon Redshift, permitindo práticas sólidas de higiene de dados em toda a organização. Como resultado, suas partes interessadas podem acessar informações relevantes com facilidade e executar decisões baseadas em dados para melhorar os processos. “Na nova arquitetura, temos maior visibilidade dos dados brutos e selecionados”, diz Srini Ponnada, diretora de tecnologia das informações da Magellan Rx. “Com esse sistema, podemos reduzir a carga em nossos sistemas de processamento de transações online e, por sua vez, fornecer informações em tempo hábil aos nossos usuários.” 

Como o Amazon Redshift opera usando SQL padrão, os membros da equipe da Magellan Rx não precisam aprender novas habilidades para consultar dados. O Amazon Route 53, um serviço Web do Sistema de nomes de domínio na nuvem altamente disponível e escalável, ajuda a direcionar os clientes ao sistema para consultas que executam trabalhos de ETL. Usando esse serviço, a Magellan Rx reduziu seu tempo de ETL de 11 para 3 horas, ou seja, em mais de 70%. 

Além de reduzir as taxas de licenciamento e suporte on-premises, a Magellan Rx reduziu custos em outras áreas dos negócios. “Reduzimos nossos custos operacionais em 20% no Amazon Redshift”, diz Kolpe. “Essa é uma vitória significativa em relação à nossa pilha anterior.”

Ao migrar para a AWS, a Magellan Rx reduziu seus custos operacionais, reduziu os tempos de consulta de ETL e análises e ganhou a capacidade de integrar novos dados de clientes com mais rapidez. Agora, a Magellan Rx pode aproveitar as ferramentas da AWS para implementar machine learning e inteligência artificial em seus pipelines.

No futuro, a Magellan Rx planeja continuar criando soluções usando ferramentas e serviços da AWS, como o Amazon SageMaker, um serviço que os desenvolvedores podem usar para criar, treinar e implantar modelos de machine learning para praticamente qualquer caso de uso, e o Amazon Redshift ML, que simplifica para os analistas de dados e desenvolvedores de banco de dados criar, treinar e aplicar modelos de machine learning usando comandos SQL familiares em data warehouses do Amazon Redshift. O uso dessas soluções ajudará a Magellan Rx a oferecer suporte aos seus clientes e expandir seus recursos de business intelligence. 

“Esse projeto estabeleceu a base para a estratégia de dados (um roteiro para o futuro) para a Magellan Rx”, diz Deepti Bhanti, diretora sênior de tecnologia da informação da Magellan Rx. “O acesso a dados brutos e quase em tempo real liberará o poder da análise e nos permitirá realizar machine learning em grande escala.”