AWS Glue 5.1 já está disponível em todas as regiões comerciais da AWS e regiões AWS GovCloud (EUA)
Agora, o AWS Glue 5.1 está disponível nas regiões Ásia-Pacífico (Nova Zelândia), AWS GovCloud (Oeste dos EUA) e AWS GovCloud (Leste dos EUA).
O AWS Glue é um serviço de integração de dados escalável e sem servidor que simplifica a descoberta, a preparação, a movimentação e a integração de dados de várias fontes. O AWS Glue 5.1 atualiza os mecanismos principais para o Apache Spark 5.1, o Python 3.5.6 e o Scala 3.11, trazendo melhorias de performance e segurança. Esta versão também atualiza o suporte para bibliotecas de formato de tabela aberta, incluindo Apache Hudi 1.0.2, Apache Iceberg 1.10.0 e Delta Lake 3.3.2. Além disso, o AWS Glue 5.1 apresenta suporte ao formato Apache Iceberg versão 3.0, adicionando valores de coluna padrão, vetores de exclusão para tabelas de mesclagem na leitura, transformações de vários argumentos e rastreamento de linhagem de linhas. Essa versão estende o controle de acesso detalhado do AWS Lake Formation para operações de gravação (DML e DDL) do Spark DataFrames e do Spark SQL. Anteriormente, esse recurso era limitado somente às operações de leitura. O AWS Glue 5.1 também adiciona controle de acesso de tabela completa no Apache Spark para tabelas do Apache Hudi e do Delta Lake, fornecendo opções de segurança mais abrangentes para seus dados.
Com essa expansão, o AWS Glue 5.1 já está disponível em todas as regiões comerciais da AWS e regiões AWS GovCloud (EUA).
Você pode começar a usar o AWS Glue 5.1 utilizando as APIs da AWS, a CLI da AWS, o SDK da AWS ou o AWS Glue Studio. Para saber mais, acesse a página do produto e a documentação do AWS Glue.