Amazon Athena para Apache Spark já está disponível nos cadernos do Amazon SageMaker
O Amazon SageMaker agora oferece suporte ao Amazon Athena para Apache Spark, reunindo uma nova experiência de caderno e uma experiência rápida do Spark sem servidor em um espaço de trabalho unificado. Agora, engenheiros de dados, analistas e cientistas de dados podem facilmente consultar dados, executar código Python, desenvolver trabalhos, treinar modelos, visualizar dados e trabalhar com IA em um só lugar, sem infraestrutura para gerenciar e faturamento de segundo nível.
O Athena para Apache Spark pode ter a escala reduzida horizontalmente em poucos segundos para suportar qualquer workload, de consultas interativas a trabalhos em escala de petabytes. O Athena para Apache Spark agora é executado no Spark 3.5.6, o mesmo mecanismo Spark de alta performance disponível na AWS, otimizado para formatos de tabela aberta, incluindo Apache Iceberg e Delta Lake. Ele traz novos atributos de depuração, monitoramento em tempo real na interface do usuário do Spark e comunicação segura com clusters interativa por meio do Spark Connect. À medida que você usa esses recursos para trabalhar com seus dados, o Athena para Spark agora impõe controles de acesso em nível de tabela definidos no AWS Lake Formation.
O Athena para Apache Spark agora está disponível com os cadernos do Amazon SageMaker em todas as regiões que oferecem suporte ao Estúdio Unificado Amazon SageMaker. Para saber mais, visite a versão 3.5 do mecanismo Apache Spark, leia o blog de notícias da AWS ou acesse a documentação do Amazon SageMaker. Acesse o guia de conceitos básicos para testá-lo nos cadernos do Amazon SageMaker.