Amazon EMR anuncia o S3A como conector padrão
A AWS anuncia o Amazon EMR S3A, um novo conector do Amazon S3 que otimiza a performance de workloads do Apache Hadoop, Apache Spark e Apache Hive no Amazon EMR. Esse novo conector aprimora a arquitetura S3A de código aberto com otimizações específicas da AWS para ajudar as organizações a processar dados em grande escala com mais eficiência. Com o suporte de integração direta para o S3 Express One Zone, o S3 Glacier e o AWS Outposts, o EMR S3A ajuda os clientes a utilizar diferentes opções de armazenamento na AWS para otimizar a velocidade de acesso e o custo de armazenamento dos dados em workloads do EMR.
Além disso, o conector EMR S3A oferece recursos avançados de segurança e performance que vão além do S3A de código aberto. As principais melhorias incluem suporte para controle de acesso detalhado integrado ao Apache Spark, resolvedor de credenciais S3A aprimorado, MagicCommitter V2 para gravação otimizada de arquivos e listagem acelerada de prefixos do S3 para formatos de arquivo colunares. Esses aprimoramentos estão disponíveis a partir da versão 7.10 do EMR e são compatíveis com as aplicações existentes.
O conector Amazon EMR S3A está disponível em todas as regiões da AWS que oferecem o Amazon EMR e é fornecido pré-configurado com a versão 7.10 ou posterior do Amazon EMR. Para saber mais sobre o Amazon EMR S3A, consulte a documentação do Amazon EMR.