Metadados do Amazon S3

A Cambridge Mobile Telematics (CMT) é a maior provedora de serviços de telemetria do mundo. Sua missão é aumentar a segurança das rodovias e dos motoristas em todo o mundo. A plataforma orientada por inteligência artificial da empresa, DriveWell Fusion®, coleta dados de sensores de milhões de dispositivos de IoT, incluindo smartphones, etiquetas proprietárias, veículos conectados, câmeras de painel e dispositivos de entidades externas, e os combina com dados contextuais para criar uma visão unificada do comportamento do veículo e do motorista.

“Na CMT, armazenamos e analisamos vários petabytes de dados de dispositivos móveis de IoT em todo o mundo para melhorar a segurança do motorista e do trânsito. Conforme ampliamos nossas operações, localizar dados específicos para o desenvolvimento de novos insights e modelos se torna cada vez mais desafiador. O S3 Metadata, particularmente com a funcionalidade de metadados personalizados, possibilita a anotação de todos os nossos dados e a manutenção dos metadados em uma tabela gerenciada e consultável. Agora, a localização de dados relevantes requer apenas uma consulta SQL eficiente e econômica. Isso faz dos metadados do S3 um divisor de águas, permitindo que ofereçamos novos recursos aos nossos clientes. “

Tim Vogel, diretor de informações, Cambridge Mobile Telematics

O PayPal está revolucionando o comércio global há mais de 25 anos. Ao criar experiências inovadoras que tornam a movimentação de dinheiro, as vendas e as compras mais simples, personalizadas e seguras, o PayPal capacita consumidores e empresas em cerca de 200 mercados a se conectarem e prosperarem na economia global.

“Os metadados do S3 nos fornecem um mecanismo simples e direto para analisar trilhões de objetos do S3 usando ferramentas padrão como o Amazon Athena e o Amazon QuickSight. Com essa funcionalidade, podemos gastar nosso tempo tomando decisões em vez de criar nossos complexos pipelines de dados para acessar e consultar metadados de objetos do S3. “

Jon Southall, vice-presidente de engenharia para o departamento de plataformas empresariais de grande escala, PayPal

A Roche é uma empresa do setor de biotecnologia que combina produtos farmacêuticos e diagnósticos para alcançar avanços na saúde personalizada e proporcionar melhorias na vida das pessoas.

“Os metadados do S3 aceleram nossas iniciativas generativas de IA. À medida que desenvolvemos aplicações de LLM, como chatbots internos para nossas equipes, dados não estruturados, como PDFs, tornam-se uma parte cada vez mais essencial. Precisamos ingerir uma grande quantidade de documentos específicos de domínio em uma aplicação de geração aumentada via recuperação (RAG) para que o chatbot possa se adaptar aos contextos específicos de negócios da Roche. Entretanto, isso também resulta em um aumento significativo na quantidade de dados não estruturados que devemos gerenciar. Precisamos de um sistema de metadados para descrever nossos dados não estruturados de forma eficiente, permitindo que os usuários filtrem rapidamente nosso extenso data lake e identifiquem os conjuntos de dados relevantes para a aplicação específica de IA generativa que estão desenvolvendo. Com o S3 Metadata, o desenvolvimento de um sistema robusto de metadados foi simplificado para apenas alguns cliques no Console de Gerenciamento da AWS. À medida que continuamos a ingerir mais dados não estruturados, o S3 Metadata identifica automaticamente os metadados e os mantém atualizados. Além disso, empregamos nossa própria função do Lambda para extrair metadados específicos do negócio, como a classificação de documentos segundo uma taxonomia relevante para a Roche, e armazenamos esses metadados no mesmo catálogo do Glue, juntamente com a tabela do S3 Metadata. Isso nos permite, por meio de uma simples junção SQL, acessar todos os metadados necessários. Os metadados do S3 nos ajudam a criar aplicativos de IA generativos com mais rapidez, o que nos permite focar na criação em vez de organizar nossos dados. “

Yannick Misteli, diretor do departamento de engenharia comercial no setor farmacêutico, Roche

A SmugMug e o Flickr disponibilizam plataformas on-line para que fotógrafos realizem upload e compartilhem fotos e vídeos. A empresa mantém bilhões de fotos e vídeos armazenados em sua aplicação.

“Imagine pilotar uma máquina do tempo usando seus dados do Amazon S3. Na SmugMug e no Flickr, temos mais de 22 anos de fotos dos nossos clientes, totalizando centenas de bilhões de objetos, armazenados no S3. O novo recurso S3 Metadata simplifica e torna mais acessível a exploração dos metadados dos nossos objetos no S3, permitindo consultas sobre informações como o tamanho dos objetos ao longo do tempo. Isso facilita a compreensão da evolução dos nossos dados, eliminando a necessidade de combinar consultas complexas e custosas de banco de dados com inventários de objetos. Entender como nossos fotógrafos usam nosso armazenamento ajuda a aumentar nosso compromisso de construir um mundo melhor por meio do poder da fotografia. “

Andrew Shieh, engenheiro principal, SmugMug

A Solink disponibiliza sistemas confiáveis de segurança por vídeo em nuvem para empresas de diversos portes. O hardware e software da empresa fornecem visibilidade para as equipes de TI, prevenção de perdas, operações e segurança em mais de 40 países e em dezenas de milhares de locais.

“A Solink processa mais de 500 milhões de horas de vídeo por mês, integrando imagens de segurança com dados comerciais críticos de mais de 350 fontes. A AWS oferece suporte à infraestrutura na qual confiamos e os metadados do Amazon S3 levarão isso adiante, fornecendo insights em tempo real que aprimoram nosso gerenciamento de conteúdo, desde o monitoramento do armazenamento e do uso até o rastreamento dos efeitos em tempo real das alterações na configuração do cliente. “

Martin Soukup, diretor técnico, Solink

A Commvault é a referência em resiliência cibernética, auxiliando mais de 100 mil organizações na proteção de dados e no fortalecimento da resiliência dos negócios em constante evolução. No momento, a Commvault disponibiliza a única plataforma de resiliência cibernética que combina a melhor segurança de dados com a recuperação ágil em grande escala, para qualquer workload, em qualquer local, além de fornecer o menor TCO.

“O Amazon S3 surgiu como um provedor líder de armazenamento em nuvem para vários tipos de dados. O Amazon S3 Metadata possibilitará que fornecedores, como a Commvault, ajudem proativamente na identificação e na proteção informações confidenciais, além de automatizar elementos, como a classificação de dados, e melhorar os resultados para nossos clientes em comum. Os metadados do S3 facilitam a organização eficiente dos dados e ajudam a otimizar a descoberta de dados, permitindo a anotação detalhada dos objetos, o que é crucial para a resiliência cibernética que prioriza a nuvem. “

Pranay Ahlawat, diretor de tecnologia e de IA, Commvault

A Intelligent Observability Platform da New Relic fornece aos clientes analytics detalhadas da performance para cada parte do ambiente de software. Os clientes podem visualizar e analisar grandes volumes de dados com facilidade e obter insights acionáveis em tempo real.

“Como líder em observabilidade, o mecanismo de dados da New Relic processa aproximadamente 1,3 exabytes de dados do Amazon S3 diariamente. O S3 Metadata acelerará nossa inovação ao gerar metadados avançados de objetos automaticamente por meio da simplificação da exploração de dados necessária pelas nossas equipes para realizar experimentos de produto e desenvolver provas de conceito, como o desenvolvimento de novos indicadores úteis para nossos clientes. Os metadados do S3 reduzirão nosso esforço para criar e manter um sistema de metadados robusto de centenas de horas para apenas alguns cliques no S3 Management Console, permitindo que nossos engenheiros se concentrem na análise de dados e não na organização dos dados. “

Siva Padisetty, diretor de tecnologia, New Relic