Os corretores do Amazon MSK Express agora entregam dados do Apache Kafka para o Amazon S3
Os corretores do Amazon MSK Express agora entregam dados para buckets de uso geral do Amazon S3, fornecendo uma capacidade totalmente gerenciada para entregar dados do Apache Kafka no Amazon S3 para processamento posterior da maneira mais fácil e confiável. Esse recurso é escalado automaticamente para fornecer dados Kafka de alto throughput ao S3 com confiabilidade de ponta a ponta para workloads de missão crítica, ao mesmo tempo em que reduz os custos de ingestão e entrega em até 60% em comparação com alternativas autogerenciadas.
Os clientes entregam dados do Apache Kafka ao Amazon S3 para casos de uso como arquivamento de registros, retenção de conformidade, repetição do Kafka e treinamento de modelos de IA/ML, e normalmente criam esses pipelines com conectores autogerenciados que se tornam caros e operacionalmente complexos à medida que as workloads aumentam, forçando as equipes a criar ou adquirir plug-ins de conectores S3, obter aprovações para implantá-los, escalar continuamente a capacidade e aplicar atualizações de segurança em toda a frota de conectores. Com esse recurso, o MSK Express gerencia automaticamente o dimensionamento, as novas tentativas e a contrapressão, para que os clientes não gerenciem mais frotas de conectores nem coordenem as equipes. O MSK Express suporta throughput de até 10 Gb/s para entrega de dados para o Amazon S3 e gerencia operações de rotina, como escalabilidade de capacidade e atualizações de versão, sem introduzir lacunas na entrega. Além disso, os clientes adicionam esse recurso de entrega sem provisionar a taxa de transferência adicional de saída do corretor, o que elimina os custos incrementais de infraestrutura que a escalabilidade de pipelines baseados em conectores normalmente incorre, de modo que os clientes escalam a entrega de acordo com a demanda real da workload em vez de provisionar para o pico, obtendo uma entrega confiável e de alto rendimento para o Amazon S3, removendo a sobrecarga operacional e reduzindo os custos.
A entrega de dados do Amazon MSK para o Amazon S3 está disponível hoje em todas as regiões da AWS em que os corretores Amazon MSK Express são oferecidos. Para obter informações sobre os preços, acesse a página de preços. Para saber mais, visite o Guia do desenvolvedor do Amazon MSK e as habilidades de IA do Amazon MSK.