Estúdio Unificado Amazon SageMaker já oferece suporte ao AWS Glue 5.1 para trabalhos de processamento de dados
Agora, o Estúdio Unificado Amazon SageMaker oferece suporte ao AWS Glue 5.1 para trabalhos de processamento de dados baseados em ETL Visual, cadernos e código. Com o AWS Glue 5.1 no Estúdio Unificado Amazon SageMaker, engenheiros de dados e cientistas de dados podem executar trabalhos no Apache Spark 3.5.6 com Python 3.11 e Scala 2.12.18 usando bibliotecas atualizadas de formatos de tabela abertos, incluindo Apache Iceberg 1.10.0, Apache Hudi 1.0.2 e Delta Lake 3.3.2.
Você pode usar o AWS Glue 5.1 no Estúdio Unificado Amazon SageMaker para criar trabalhos de processamento de dados selecionando o Glue 5.1 no menu suspenso de versões nas configurações do trabalho. Isso se aplica a trabalhos baseados em ETL Visual, cadernos e código para que você possa aproveitar as bibliotecas mais recentes de runtime do Spark e formatos de tabela abertos em todos os fluxos de trabalho de processamento de dados.
O AWS Glue 5.1 no Estúdio Unificado Amazon SageMaker está disponível em todas as regiões que oferecem o Estúdio Unificado Amazon SageMaker. Para saber mais, consulte a documentação do Estúdio Unificado Amazon SageMaker. Para obter detalhes sobre o que está incluído no AWS Glue 5.1, incluindo o suporte atualizado aos formatos de tabela abertos e os recursos de controle de acesso, consulte a documentação do AWS Glue.