O AWS Glue 6.0 oferece redução de preço de 30% e suporte ao Iceberg v3
O AWS Glue 6.0 agora está disponível ao público em geral, oferecendo uma redução de preço de 30% e introduzindo suporte completo para o Apache Iceberg v3, novas versões do Apache Hudi e Delta Lake e novos recursos para melhorar a produtividade do desenvolvedor. O AWS Glue 6.0 também atualiza o runtime para Apache Spark 4.1, Python 3.13 e Scala 2.13.
Com o Apache Iceberg v3, o AWS Glue 6.0 adiciona o tipo de dados VARIANT com destruição automática para leituras mais rápidas de dados semiestruturados, vetores de exclusão para atualizações de alto desempenho em nível de linha, tipos de dados de geometria e geografia para processamento espacial e evolução flexível de esquemas por meio de tipos de dados UNKNOWN e valores de coluna DEFAULT. O Glue 6.0 também apresenta recursos que aumentam a produtividade e o desempenho do desenvolvedor, como o Spark Declarative Pipelines, que eliminam código de orquestração repetitivo, streaming em tempo real para latências inferiores a um segundo e UDFs Python nativos do Arrow para melhorar o desempenho do PySpark. Esses recursos ajudam você a implementar ETL em grande escala, workloads em lote recorrentes, análises de streaming e desenvolvimento de aplicativos de IA usando o AWS Glue.
O AWS Glue 6.0 está disponível em todas as regiões comerciais da AWS, AWS GovCloud (EUA) e AWS China.
Para começar a usar, selecione Glue 6.0 no menu suspenso de versões no console do AWS Glue ou no Estúdio Unificado Amazon SageMaker ao criar um novo trabalho, ou migre os trabalhos existentes usando o Generative AI Upgrade Agent para o Apache Spark no AWS Glue. Para saber mais, visite a documentação do AWS Glue e os preços do AWS Glue.