Lente de Armazenamento do Amazon S3
Visão geral
A Lente de Armazenamento do S3 oferece visibilidade de toda a empresa sobre o uso do armazenamento de objetos, tendências da atividade e faz recomendações úteis para otimizar os custos, melhorar o desempenho de aplicações e aumentar a proteção de dados. A Lente de Armazenamento do S3 é a primeira solução de analytics de armazenamento em nuvem a oferecer uma visão única do uso e da atividade do armazenamento de objetos em milhares de contas em uma organização, com detalhamentos para gerar insights em vários níveis de agregação. Com base em anos de experiência ajudando clientes a otimizar seu armazenamento, a Lente de Armazenamento do S3 analisa métricas de toda a organização para trazer recomendações contextuais que facilitam a tomada de providências imediatas.
O Amazon S3 é usado para armazenar grandes conjuntos de dados compartilhados em centenas de contas e buckets, várias regiões e bilhões de prefixos. Com a Lente de Armazenamento do S3, você pode entender com facilidade seu armazenamento e analisá-lo para detectar anomalias. A Lente de Armazenamento do S3 oferece várias métricas gratuitas e avançadas sobre o uso e a atividade do armazenamento do S3 em um painel interativo no console do S3. As métricas gratuitas são fornecidas a todos os clientes, enquanto as métricas avançadas podem ser habilitadas por uma taxa mensal de monitoramento por objeto para receber métricas adicionais, insights no nível do prefixo, filtragem personalizada de metadados, retenção de dados estendida e a opção de publicar métricas no Amazon CloudWatch. Para obter detalhes sobre preços de métricas avançadas, acesse a Página de preços do Amazon S3.
Como funciona a Lente de Armazenamento do S3
Todos os clientes do Amazon S3 podem acessar um painel interativo da Lente de Armazenamento do S3 no console do S3, que contém visualizações pré-configuradas para visualizar as tendências de uso e atividades do armazenamento. Com as métricas gratuitas da Lente de Armazenamento do S3, você recebe 62 métricas (únicas e derivadas) entre várias categorias no nível do bucket e 14 dias de dados históricos no painel. Você pode filtrar o painel por resumo, otimização de custos, proteção de dados, gerenciamento de acesso, desempenho ou eventos para analisar métricas específicas dos seus casos de uso pretendidos. Além do painel no console do S3, é possível exportar métricas em formato CSV ou Parquet para um bucket do S3 de sua escolha para uso posterior. Para saber mais sobre a Lente de Armazenamento do S3, leia a documentação.
Benefícios por fazer upgrade para as métricas avançadas da Lente de Armazenamento
As métricas avançadas trazem insights relacionados a atividades (como contagens de solicitações), otimização de custo ampliada (como contagens de regras do Ciclo de Vida do S3), métricas avançadas de desempenho (como contagens de tamanhos de solicitações e objetos), proteção de dados adicional (como contagens de regras da Replicação do S3) e códigos de status detalhados (como erros de autorização 403).
As métricas no nível do prefixo permitem o detalhamento granular dos prefixos no bucket, oferecendo visibilidade da atividade de uso e armazenamento em bilhões de prefixos por bucket. Veja as métricas de cada prefixo e otimize o armazenamento com mais eficiência.
Com as métricas avançadas da Lente de Armazenamento, você obtém insights com base em 15 meses de dados históricos. Para a exportação de métrica opcional, é possível configurar qualquer período de retenção desejado.
Com as métricas avançadas, você pode acessar as métricas da Lente de Armazenamento do S3 pelo Amazon CloudWatch para criar alarmes ou pela API do CloudWatch para enviar métricas a parceiros de observabilidade integrados.
Com os grupos da Lente de Armazenamento, você pode visualizar métricas filtradas por tag, prefixo, sufixo, idade ou tamanho do objeto. Por exemplo, você pode filtrar métricas por tag do objeto para identificar conjuntos de dados com crescimento mais rápido ou visualizar o armazenamento com base no tamanho e na idade do objeto para embasar a estratégia de arquivamento de armazenamentos.
Crie filtros personalizados com grupos da Lente de Armazenamento
Os grupos da Lente de Armazenamento agregam métricas usando filtros personalizados com base nos metadados do objeto. Os grupos da Lente de Armazenamento ajudam a detalhar as características dos dados, como distribuição de objetos por idade, os tipos de arquivo mais comuns e mais. Essas informações ajudam a entender e otimizar melhor o armazenamento do S3. Com os grupos da Lente de Armazenamento, você pode visualizar métricas filtradas por tag, prefixo, sufixo, idade ou tamanho do objeto. Por exemplo, você pode filtrar métricas por tag do objeto para identificar conjuntos de dados com crescimento mais rápido ou visualizar o armazenamento com base no tamanho e na idade do objeto para embasar a estratégia de arquivamento de armazenamentos. Para começar, crie grupos da Lente de Armazenamento pelo console, pela CLI ou pelo SDK do S3 e anexe-os aos painéis da Lente de Armazenamento. Consulte a documentação para saber mais.
Upstox
A Upstox é uma corretora de descontos indiana líder que oferece educação financeira e uma plataforma digital de investimentos para mais de 11 milhões de clientes.
“O caminho a seguir é continuar usando a Lente de Armazenamento do Amazon S3 para acompanhar melhor nosso uso do armazenamento e melhorar ainda mais a eficiência dos custos. Com o painel interativo da Lente de Armazenamento do S3, podemos localizar com facilidade os hotspots do prefixo do S3 em que ocorrem aumentos de custo e otimizá-los com as políticas de retenção corretas e a classe de armazenamento do S3 para melhorar ainda mais a eficiência dos custos.”
Indranil Chandra, Principal ML & Data Engineer da Upstox
Leia o estudo de caso »
O Pinterest é um mecanismo de descoberta visual que mais de 400 milhões de pessoas usam todos os meses para encontrar inspiração para suas vidas.
“A Lente de Armazenamento do S3 aumentará a visibilidade sobre o uso do armazenamento e nos ajudará a otimizar continuamente nossos custos de armazenamento. Usamos a visibilidade de toda a organização para ver o uso agregado do armazenamento por nossas equipes em várias regiões e, em seguida, detalhamos para entender o crescimento do armazenamento no nível do bucket ou até mesmo do prefixo.
Com a Lente de Armazenamento do S3, podemos então criar painéis personalizados de autoatendimento para que diferentes equipes internas possam encontrar maneiras de otimizar os custos de armazenamento usando uma política de ciclo de vida ou fazendo a transição dos dados para uma classe de armazenamento mais econômica.”
Yi Yin, engenheiro de software da Pinterest
Snowflake
O Snowflake oferece a nuvem de dados - onde as organizações mobilizam dados com escala, simultaneidade e performance quase ilimitados.
“A capacidade de usar métricas de visualização com base em prefixos será inestimável para nós. Teremos melhores informações sobre o uso de prefixos específicos, incluindo armazenamento total, contagem de objetos, tamanhos médios de objetos e detalhamento por versões atuais e não atuais, o que pode nos ajudar a depurar e ver as tendências das operações de forma econômica. Isso não era possível anteriormente antes da Lente de Armazenamento do S3.”
Brian Nutt, engenheiro de software sênior, Snowflake
Veeva
A Veeva Systems Inc. é líder em soluções em nuvem, incluindo dados, software e serviços, para o setor global de ciências biológicas.
“A Lente de Armazenamento do S3 é muito simples de instalar e configurar. Recebemos boas informações sobre nosso uso do S3, o que nos permitiu implementar planos de ação para otimizar os custos no S3. Agora estamos economizando milhares de dólares por mês otimizando a forma como armazenamos objetos no S3.”
Dan Soble, vice-presidente de operações técnicas da Veeva
Dropsuite
A Dropsuite ajuda organizações em 139 países a fazer backup, recuperar e proteger suas informações comerciais importantes de forma simples. Atualmente, sua solução de backup de e-mail faz backup dos dados da empresa de mais de um milhão de usuários individuais.
“Com a Lente de Armazenamento do S3, temos uma visibilidade macro com filtros nos níveis do bucket e da região, levando a conversas transformadoras sobre design de arquitetura. Usamos insights da Lente de Armazenamento do S3 para analisar algoritmos de compressão, analisar métodos de armazenamento e tomar decisões sobre a remoção e o gerenciamento de dados para os clientes. Sem a Lente de Armazenamento do S3, não teríamos esses dados de uso granulares para examinar, visualizar e agir. Também nos dá visibilidade sobre padrões de uso de dados do cliente. Agora, com essas informações valiosas disponíveis para nós, conseguimos usar as classes de armazenamento do Amazon S3 com mais eficiência.”
Manjor Kalyanaraman, diretor de tecnologia da Dropsuite
Leia o estudo de caso »
DoorDash
A DoorDash conecta consumidores com suas empresas locais favoritas em mais de 25 países em todo o mundo. Como uma empresa nascida na nuvem, a DoorDash hospeda a maior parte da sua infraestrutura na AWS, incluindo a plataforma de comércio.
“Quando decidimos aprofundar o uso do Amazon S3 para identificar oportunidades de eficiência em prol do crescimento futuro, iniciamos nossa investigação usando a Lente de Armazenamento do S3 com as recomendações e métricas avançadas. Descobrimos que a capacidade de analisar padrões de uso e atividade do armazenamento no nível do bucket, do prefixo e da classe de armazenamento do S3 é inestimável para identificar oportunidades de otimização dos custos. Sem a Lente de Armazenamento do S3, teria levado muito mais tempo para examinar e visualizar o uso do Amazon S3 e aumentar a economia da nossa unidade de armazenamento.
Levon Stepanian, Cloud FinOps Lead na DoorDash
Leia o blog »
