Publicado: Jan 20, 2022
Estamos anunciando o suporte para o uso do Apache Spark SQL na atualização de tabelas do Glue Data Catalog por meio da Integração do Amazon EMR com o AWS Lake Formation.
A integração do Amazon EMR com o AWS Lake Formation permite definir e aplicar permissões em nível de banco de dados, tabela e coluna quando usuários do Apache Spark acessam dados no Amazon S3 por meio do Glue Data Catalog. Anteriormente, com a integração do AWS Lake Formation habilitada, era possível ler dados somente usando instruções Spark SQL, como SHOW DATABASES e DESCRIBE TABLE. Agora, também é possível inserir dados ou atualizar as tabelas do Glue Data Catalog com estas instruções: INSERT INTO, INSERT OVERWRITE e ALTER TABLE.
Esse recurso está habilitado no Amazon EMR 5.34 nas seguintes regiões da AWS: Leste dos EUA (Norte da Virgínia), Leste dos EUA (Ohio), Oeste dos EUA (Norte da Califórnia), Oeste dos EUA (Oregon), Europa (Frankfurt), Europa (Irlanda), Europa (Londres), Europa (Paris), Europa (Estocolmo), Canadá (Central), Ásia-Pacífico (Mumbai), Ásia-Pacífico (Seul), Ásia-Pacífico (Singapura), Ásia-Pacífico (Tóquio), Ásia-Pacífico (Sydney) e América do Sul (São Paulo).
Para começar a utilizar, consulte Integração do Amazon EMR com o AWS Lake Formation.